数据工程师,预测核心数据工程

多伦多 1天前全职 网络
面议
亚马逊预测团队正在寻找一名数据工程师加入团队。我们是亚马逊需求分析和预测领域的先锋。 预测数据工程师构建可扩展的数据转换管道,以从不同的数据源获取数据,并为机器学习模型提供大数据源,以预测全球亚马逊的需求。如果你想学习如何利用技术预测未来,这就是适合你的团队。 作为需求预测团队的一员,你将在解决数据工程领域世界上最复杂的技术挑战之一中发挥关键作用。 你将利用大规模计算平台构建用于分布式系统中机器学习和统计分析的大数据集——仅举几例。 我们的数据工程师需要能够收集和理解数据需求,构建和维护大数据源,为机器学习模型、数据科学家、商业智能工程师准备数据,并与软件工程师合作,实现高质量的数据获取和转换解决方案。你需要对解决复杂问题充满热情,并享受在极端负载下操作复杂系统的挑战。 如果你认为你能接受挑战并希望了解更多,我们很乐意与你交谈。在这个角色中,你将成为一名具有重大范围和影响力的技术专家。 你将与一组软件开发工程师、产品经理、数据科学家和商业智能工程师密切合作,创建数据基础设施和数据处理管道,以推动我们团队的计划。成功的候选人应具备强大的数据工程背景。你需要有结构化数据的经验,并能够使用各种工具分析/转换数据。虽然SQL是一个强烈的要求,但灵活使用脚本语言也是必须的。 通常,创新和变化的速度意味着需要转向新的数据源,我们的数据工程师可以参与深入研究业务数据,以了解/衡量差异来源。你的分析技能和对大数据世界中模式、元数据和数据结构的知识将是必不可少的。 作为一名数据工程师,你需要设计和开发基于EMR应用程序的高可扩展性ETL,并支持Glue ETL或Redshift。大数据架构和设计的知识是必须的。 主要工作职责 • 使用AWS和/或亚马逊内部工具创建可扩展的数据解决方案。 • 创建和维护数据转换和获取管道的业务逻辑。 • 使用S3/Glue在亚马逊数据湖和内部数据管理系统中创建和维护数据集。 • 数据调查和分析,以了解变化对下游客户用例的影响,并构建转换逻辑以获取预测数据分析的数据。 • 为亚马逊下游团队数据消费者提供高质量数据。 生活中的一天 我们不仅为机器学习模型提供数据,还为我们的BI和数据科学直接客户提供数据。 我们帮助他们获取数据分析所需的数据,与他们合作解决数据质量问题,并解决实验、训练和回测模型以及定期生成预测所需的数据要求。 基本资格: • 3年以上数据工程经验 • 学士学位 • 分布式系统在数据存储和计算方面的知识 • SQL经验 优先资格: • 硕士学位 • 3年以上使用OLAP技术开发和操作大规模数据结构以进行商业智能分析的经验 亚马逊是一个平等机会的雇主,不会基于受保护的退伍军人身份、残疾或其他法律保护的身份进行歧视。我们的包容性文化使亚马逊员工能够为客户提供最佳结果。 如果你有残疾并在申请和招聘过程中需要工作场所的便利或调整,包括面试或入职过程的支持,请访问以获取更多信息。如果你申请的国家/地区未列出,请联系你的招聘合作伙伴。 此职位的基本工资范围如下所示。 作为一家全面薪酬公司,亚马逊的套餐可能包括其他元素,如签约奖金和限制性股票单位(RSU)。最终薪酬将根据经验、资格和地点等因素确定。 亚马逊提供全面的福利,包括健康保险(医疗、牙科、视力、处方、基本人寿和意外死亡与伤残保险)、注册退休储蓄计划(RRSP)、递延利润分享计划(DPSP)、带薪休假和其他改善健康和福祉的资源。我们感谢所有申请者的兴趣,但只有被面试的申请者会被告知招聘状态。CAN, ON, Toronto - 每年103,600.00加元。