职位摘要...
你将会做什么
工作摘要
在沃尔玛，我们帮助人们省钱，让他们过得更好。这个使命成为我们做出每个决策的基础，推动我们创造零售业的未来。没有最好的人才，我们就无法做到这一点——这些人才是创新、好奇和积极进取的，致力于为我们的客户创造卓越的体验。
你是否对利用工程数据解决动态问题、塑造零售业未来充满无尽的能量和激情？沃尔玛的规模之大带来了最庞大的大数据集。作为沃尔玛市场部的数据工程师，你将深入挖掘我们庞大的数据规模，帮助释放零售数据科学的力量，构想、开发和维护数据流水线，供我们的数据科学家和分析师依赖。你将负责为复杂的数据转换提供编排层，将原始数据从源头精炼为有针对性、有价值的数据资产，以受控的方式供消费。你将与数据科学家、分析师、其他工程师和业务利益相关者合作，解决复杂而令人兴奋的挑战，从而构建能够演变零售业务模型并对客户和卖家生活产生积极影响的能力。
关于数据和客户分析（DCA）组织：
我们的组织专注于管理和提供一流的数据资产，包括创建和维护数据标准、推动政策合规性、建立合作伙伴关系以及开发流水线和自助工具。我们赋予业务利用数据推动增长的能力，推动核心业务的收入增长，并建立新的商业模式机会。
你将会做什么：
• 你将使用尖端的数据工程技术创建关键数据集，并深入挖掘我们庞大的数据规模，帮助释放数据科学的力量，构想、开发和维护数据流水线，供我们的数据科学家和分析师依赖。
• 你将负责为复杂的数据转换提供编排层，将原始数据从源头精炼为有针对性、有价值的数据资产，以受控的方式供消费。
• 你将与数据科学家、分析师、其他工程师和业务利益相关者合作，解决复杂而令人兴奋的挑战，从而构建能够演变市场业务模型并对客户和卖家生活产生积极影响的能力。
• 你将通过与产品管理、Web运营、项目管理、业务和用户体验团队合作，领导中等到大型项目的发现阶段，提出高层设计。获得跨职能的批准，推动概念验证并实施原型以验证想法。
• 你将通过领导内部技术团队，制定创新策略、流程和最佳实践。与业务的跨职能团队合作。评估关键机会，记录项目范围，制定长期计划和项目时间表。与组织内的决策者和高管进行沟通和影响，并通过知情讨论解决团队之间的技术差异。
• 通过分析行业最佳实践、将行业与内部流程和解决方案进行对比，利用行业研究改进沃尔玛的技术环境。研究或影响未来行业解决方案是否符合内部需求，并定义软件开发准则、标准和流程。
• 通过识别客户和运营需求，推动多个业务计划和项目的执行。制定和沟通业务计划和优先事项，消除影响绩效的障碍和障碍。制定应急计划，并展示适应性和支持持续学习的能力。
• 为初级数据工程师提供指导和辅导。
• 设计、开发和维护高度可扩展和容错的实时、准实时和批处理数据系统/数据流水线，以优化性能处理、存储和提供大量数据。
• 通过实施数据质量检查、数据验证和数据清洗流程，确保摄取和处理的数据准确无误、质量高。
• 通过分析、大数据分析和自动化，确定解决业务问题的可能选项。
• 构建业务领域专业知识，为产品团队、分析、数据科学家和其他数据消费者提供数据支持。
你将带来什么：
• 计算机科学或相关领域的学士/硕士学位
• 在大数据技术/数据流水线开发方面具有8年以上经验
• 管理和操作大规模数据集（TB级别）的能力至关重要。
• 精通大数据技术，如Hadoop、Apache Spark（首选Scala）、Apache Hive或类似的云框架（首选GCP，AWS、Azure等），以构建具有强调优化、SLA遵守和容错能力的批处理数据流水线。
• 精通使用Automic、Airflow、Luigi等编排器构建幂等工作流程。
• 精通编写SQL进行数据分析、优化、分析数据（首选BigQuery或SPARK SQL）。
• 强大的数据建模技能是设计能够适应数据源演变并促进各种数据集之间无缝数据连接的模式的必备技能。
• 能够直接与利益相关者合作，了解数据需求，并将其转化为流水线开发/数据解决方案工作。
• 强大的分析和解决问题的能力对于在数据集成和模式演变过程中可能出现的问题进行识别和解决至关重要。
• 在这项工作中，能够以高质量、快速的速度工作并开始交付，将至关重要。
• 有效的沟通和协作能力对于在团队环境中工作和协调项目中的不同利益相关者之间的努力至关重要。
你的额外优势：
• 使用Apache Kafka、Spark Streaming、Kafka Connect等构建复杂的准实时（NRT）流数据流水线，强调稳定性、可扩展性和SLA遵守。
• 熟悉REST API——熟悉Apache Druid、Redis、Elasticsearch、GraphQL或类似技术。理解API合同、构建遥测、压力测试等。
• 开发使用Looker/Tableau的报告/仪表板的经验
• 关于沃尔玛全球技术
• 想象一下，在这样的环境中工作，一行代码可以让数亿人的生活变得更轻松。这就是我们在沃尔玛全球技术所做的。我们是一支由软件工程师、数据科学家、网络安全专家和服务专业人员组成的团队，是世界领先的零售商，我们产生了巨大的影响，并处于下一个零售业颠覆的前沿。人是我们创新的原因，也是我们创新的动力。我们培训团队掌握未来的技能，并邀请像您这样的专家帮助我们成长。我们为那些追求第一个机会的人提供角色，也为那些希望通过创新规模化、影响数百万人并重新构想零售业未来的人提供机会。在这里，你可以在科技领域开启一段伟大的职业生涯，为几乎所有行业获得新的技能和经验，或者利用你的专业知识进行规模化创新，影响数百万人，并重新构想零售业的未来。
灵活的混合工作方式：
我们采用混合工作方式，主要是在办公室工作，不在现场时进行虚拟工作。我们的园区作为增强协作、使我们团结一致以实现业务需求的中心。这种方式有助于我们做出更快的决策，消除全球团队之间的地理障碍，并在个人生活中更加灵活。
福利：
福利：除了我们优厚的薪酬套餐外，您还可以根据绩效获得奖励。其他优厚的福利包括401(k)匹配、股票购买计划、带薪产假和育儿假、带薪休假、多种健康计划等等。
平等机会雇主：
沃尔玛公司是一家平等机会雇主——自愿选择。我们相信只有真正了解员工、客户和我们服务的社区，我们才能帮助他们过得更好。这意味着理解、尊重和重视多样性——独特的风格、经历、身份、想法和观点——同时包容所有人。
以上信息旨在指示在该职位上的工作性质和级别。它不是旨在包含或解释员工在这份工作中所需的所有责任和资格的全面清单。完整的职位描述可以作为招聘过程的一部分提供。
在沃尔玛，我们提供有竞争力的薪酬，以及基于绩效的奖励和其他优厚的福利，让您的心灵、身体和钱包更快乐。健康福利包括医疗、视力和牙科保险。财务福利包括401(k)、股票购买计划和公司支付的人寿保险。带薪休假福利包括带薪休假（包括病假）、产假、家庭护理假、丧假、陪审团服务和投票。其他福利包括短期和长期残疾、公司折扣、军事休假工资、领养和代孕费用报销等等。
您还将获得可用于度假、病假、假日或其他目的的带薪休假或带薪病假。您获得的休假时间取决于您的工作分类和工作年限。它将满足或超过适用的带薪病假法律要求。有关带薪休假的信息，请参阅 https://one.walmart.com/notices 。
Live Better U是沃尔玛为沃尔玛和山姆会员店全职和兼职员工提供的支付教育福利计划。该计划涵盖从高中毕业到学士学位的各种课程，包括英语学习和短期证书。学费、书籍和费用由沃尔玛完全支付。
某些福利的资格要求适用，并可能取决于您的工作分类和工作年限。福利可能会发生变化，并可能受到特定计划或程序条款的约束。有关福利和资格的信息，请参阅One.Walmart，网址为https://bit.ly/3iOOb1J。
这个职位的年薪范围是143,000.00美元至286,000.00美元。
额外的报酬还包括年度或季度绩效奖励。
某些职位的额外报酬还可能包括：
- 区域薪资区域（根据地点）
- 股权激励
最低资格要求...
以下是此职位所需的最低资格要求。如果没有列出，则没有最低资格要求。
选项1：计算机科学学士学位和4年软件工程或相关领域经验。选项2：6年软件工程或相关领域经验。选项3：计算机科学硕士学位和2年软件工程或相关领域经验。
3年数据工程、数据库工程、商业智能或业务分析经验。
首选资格...
以下是此职位的可选首选资格。如果没有列出，则没有首选资格。
数据工程、数据库工程、商业智能或业务分析、ETL工具和与云中大数据集合一起工作的经验、计算机科学或相关领域硕士学位和4年软件工程或相关领域经验
主要位置...
美国加利福尼亚州圣尼维尔市加利福尼亚大道640号，94086-4828 
旧金山