一目了然
职位:IT数据工程师
主要地点:美国密歇根州米德兰
其他地点:美国德克萨斯州休斯顿 + 更多 - 更少
时间表:全职
发布日期:2025年12月22日
职位编号:R2064353
职位类型:常规
工作地点类型:现场
立即申请 (https://dow.wd1.myworkdayjobs.com/ExternalCareers/job/Midland-MI-USA/IT-Data-Engineer\_R2064353/apply)
返回职位搜索
在陶氏,我们相信以人为本,并热衷于为客户、员工和地球提供诚信、尊重和安全。
我们的人是我们解决方案的核心。他们反映了我们生活的社区和我们开展业务的世界。他们的多样性是我们的力量。我们是一个不懈解决问题的社区,每天都有机会通过您的视角做出贡献,改变行业并塑造未来。我们的目标很简单——通过科学和合作为世界提供可持续的未来。如果您正在寻找挑战和有意义的角色,您来对地方了。
陶氏(NYSE: DOW)是世界领先的材料科学公司之一,为包装、基础设施、移动性和消费应用等高增长市场的客户提供服务。我们的全球广度、资产整合和规模、专注的创新、领先的业务地位和对可持续性的承诺使我们能够实现盈利增长并帮助提供可持续的未来。我们在30个国家运营制造基地,雇佣约36,000名员工。陶氏在2024年实现了约430亿美元的销售额。提及陶氏或公司是指陶氏公司及其子公司。通过访问www.dow.com,了解更多关于我们及我们成为世界上最具创新性、以客户为中心、包容性和可持续的材料科学公司的雄心。
关于您和这个角色
陶氏在密歇根州米德兰或德克萨斯州休斯顿为数据工程师提供了一个令人兴奋的机会。这个角色将在我们团队内对关键数据计划做出重要的技术贡献。您将负责推动技术实施并参与设计在Azure Databricks Lakehouse平台上的可扩展的Gold层数据产品。
这个角色专注于解决复杂的技术挑战、优化、架构贡献和可靠性,确保我们的数据集具有高性能并准备好支持高级用例,包括:
+ 机器学习(ML)管道
+ 实时数据消费
+ 生成和代理AI系统
+ 核心企业报告和BI
+ 数据驱动的应用程序
职责
+ 技术设计贡献:与高级数据工程师合作,将复杂的业务需求和模糊的问题陈述转化为清晰、稳健和可扩展的技术设计和数据模型(例如,维度建模、星型模式),并独立推动这些设计的实施。
+ 性能优化:设计、构建和部署使用高度优化的PySpark的高容量数据转换逻辑。您将应用高级技术来调整Spark作业并诊断性能瓶颈,以确保最大效率和最低云计算成本。
+ 架构与部署:显著贡献于Azure DevOps/Git中的CI/CD管道的设计和改进,确保数据解决方案在各个环境中的可靠、自动化和安全部署。
+ 多样化数据集成:深入了解并连接到各种源系统,展示在跨多种技术(如SQL Server、Neo4j和CosmosDB)中管理数据持久性和查询性能的熟练程度。
+ 质量与治理:主动实施和维护高级数据质量框架(例如,Delta Live Tables,Great Expectations)和监控解决方案,以确保任务关键应用程序的数据可靠性。
+ 协作与指导:作为同行的技术资源,进行技术代码审查,并在PySpark和Databricks最佳实践方面非正式地指导助理数据工程师。
成功的候选人将具备独立实施和优化复杂数据解决方案所需的经验和技术深度:
+ 核心技术专长(2-5年示范经验)
+ PySpark和分布式处理:证明能够编写高度优化的生产级PySpark/Spark代码。在分布式计算环境中识别和解决性能瓶颈的经验。
+ 高级数据建模:设计和实施分析数据模型(例如,维度建模、星型/雪花模式)和处理缓慢变化维度(SCDs)的实际经验。
+ 云编排:使用Azure Data Factory(ADF)、Databricks Workflows或等效工具(例如,Airflow)进行复杂依赖管理、错误处理和端到端管道编排的专业知识。
+ 数据库多样性:展示高级SQL经验和至少一种非关系或图数据库(例如,CosmosDB,Neo4j)查询和集成数据的实际操作经验。
+ 工程心态和专业成长
+ 技术设计贡献:能够快速综合信息并为设计过程贡献清晰、文档齐全的技术规范和架构图。
+ 功能所有权:在更大项目中承担复杂功能和模块所有权的历史,推动其完成,并自主管理技术依赖。
+ 实用主义和主动性:强烈的行动倾向,结合实用的方法来提供稳定、可维护和具有成本效益的解决方案。
+ 沟通与影响力:优秀的口头和书面沟通能力,能够向工程同行和高级利益相关者清晰表达技术设计,有效影响技术决策。
所需资格
+ 至少拥有学士学位或在美国E5级别或以上的相关军事经验或加拿大二级军士长或中士,或5年相关经验以代替学士学位。
+ 至少2年数据工程、软件工程或密切相关领域的专业经验。
+ 这个美国职位的最低要求是能够合法在美国工作。此职位不提供签证赞助/支持,包括任何类型的美国永久居留(绿卡)流程。
优先技能
+ 具有与计算(Databricks)和存储(ADLS)相关的云成本管理原则的经验。
+ 具有基础设施即代码(例如,Terraform,ARM模板)的经验。
+ 熟练使用数据可视化和仪表板工具(例如,Power BI,Tableau)。
您的技能
+ PySpark / 分布式数据处理:能够使用PySpark构建、优化和排除高容量数据转换管道的故障,包括调整Spark作业、解决性能瓶颈并确保高效的分布式执行。
+ 高级数据建模(维度/星型模式设计):在将复杂的业务需求转化为可扩展的分析数据模型(如星型和雪花模式)方面的专业知识,并为下游分析实施SCD逻辑。
+ 云编排与CI/CD(Azure Data Factory,Databricks Workflows,Azure DevOps/Git):设计自动化、可靠的数据管道、管理任务依赖关系并在各个环境中实施CI/CD部署流程的技能。
+ 跨多样化系统的数据集成(SQL Server,CosmosDB,Neo4j):能够连接、查询和集成关系和非关系来源的数据,同时优化持久性、摄取和查询性能。
+ 数据质量工程与治理(Delta Live Tables,Great Expectations):应用验证框架、监控和自动化质量检查,确保ML、实时分析和企业BI用例的数据可靠性。
注意:此角色不提供搬迁援助。
福利——陶氏为您提供的
我们投资于您。
陶氏投资于全面的奖励计划,以帮助您管理您的所有方面:您的薪酬、您的健康、您的生活、您的未来和您的职业。您每天都将您的背景、才华和视角带到工作中。陶氏通过投资于您的整体福祉来奖励这种承诺。
以下是作为陶氏员工的一些亮点:
+ 在全球市场上提供公平和市场竞争力的基本薪酬和奖金机会,以及本地相关的激励措施。
+ 支持您的身体、心理、财务和社会福祉的福利和计划,帮助您在需要时获得所需的护理。
+ 竞争力的退休计划,可能包括公司提供的福利、储蓄机会、财务规划和教育资源,帮助您实现长期财务目标。
+ 员工股票购买计划(可用性因地点而异)。
+ 学生债务退休储蓄匹配计划(仅限美国)。
+ 陶氏将把每月学生债务付款的价值视为员工储蓄计划(401(k))的贡献,帮助员工达到公司匹配。
+ 强大的医疗和人寿保险套餐,提供多种覆盖选项以满足您的个人需求。在某些国家/地区还提供旅行保险。
+ 通过培训和指导、工作经验、社区参与和团队建设来学习和成长的机会。
+ 工作场所文化赋予基于角色的灵活性,以最大化个人生产力和平衡个人需求。
+ 竞争力的年度假期津贴。
+ 为新父母(包括生育和非生育、收养和寄养父母)提供带薪休假。
+ 为生病或受伤的家庭成员提供带薪休假。
+ 支持志愿服务和员工资源小组(ERG)参与的带薪休假。
+ 为所有陶氏员工提供的健康门户,我们的一站式商店,促进健康,赋予员工掌控其整个健康旅程的权力。
+ 现场健身设施,帮助保持健康和活跃(可用性因地点而异)。
+ 员工在线购物、电影票、健身房会员等折扣。
+ 此外,我们的一些地点可能提供:
+ 交通津贴(可用性因地点而异)
+ 餐饮补贴/代金券(可用性因地点而异)
+ 碳中和交通激励措施,例如骑自行车上班(可用性因地点而异)
加入我们的团队,我们可以一起改变世界。
关于陶氏
陶氏(NYSE: DOW)是世界领先的材料科学公司之一,为包装、基础设施、移动性和消费应用等高增长市场的客户提供服务。我们的全球广度、资产整合和规模、专注的创新、领先的业务地位和对可持续性的承诺使我们能够实现盈利增长并帮助提供可持续的未来。我们在30个国家运营制造基地,雇佣约36,000名员工。陶氏在2024年实现了约430亿美元的销售额。提及陶氏或公司是指陶氏公司及其子公司。通过访问www.dow.com,了解更多关于我们及我们成为世界上最具创新性、以客户为中心、包容性和可持续的材料科学公司的雄心。
作为我们对包容性的承诺的一部分,陶氏致力于提供平等就业机会。我们鼓励每位员工每天将完整的自我带到工作中,不仅提供更多价值,还能拥有更充实的职业生涯。有关陶氏平等机会的更多信息,请访问www.dow.com。
陶氏是一个平等就业机会雇主,致力于提供不考虑种族、肤色、宗教、性别(包括怀孕)、性取向或性别认同、国籍、年龄、残疾和遗传信息(包括家庭病史)的机会。我们还致力于为符合条件的残疾人提供合理的便利。