MTS - 数据工程

圣弗朗西斯科 28天前全职 网络
98万 - 231.9万 / 年
概述 如果您曾经看到一个庞大的数据管道处理数十亿条记录而毫不费力,感受到调试关键业务模式迁移的真正满足感,或者对减少管道延迟的毫秒数感到兴奋,那么您来对地方了。我们正在寻找最优秀的数据工程师。那些构建和扩展其他人依赖的数据系统的数据工程师,他们以交付坚如磐石的数据质量为荣,并真正享受数据工程的工艺。如果您是那种当监控仪表板显示全绿时庆祝,并因挑战让数据在复杂系统中无缝流动而充满活力的人,那么这个角色就是为您准备的。 加入我们,设计和实施为全球数百万用户提供支持的Copilot数据骨干。您将负责完整的数据生命周期——从构建处理大规模的闪电般快速的ETL管道到设计推动产品决策的实验框架。我们需要一个在解决复杂数据挑战中茁壮成长、喜欢与聪明的团队成员合作,并对构建能够正常工作的基础设施充满真正兴奋的人。在我们快节奏的环境中,您将拥有创新的自由和构建世界级数据产品的支持,这些产品能够产生真正的影响。 申请此职位,您需要在旧金山地区或雷德蒙德地区本地,并且每周在办公室工作3天。 微软的使命是赋能地球上的每个人和每个组织实现更多。作为员工,我们以成长心态聚集在一起,创新以赋能他人,并合作实现我们的共同目标。每天,我们基于尊重、诚信和责任感的价值观构建包容的文化,让每个人在工作中及其之外茁壮成长。 从2026年1月26日开始,如果MAI员工居住在距离指定微软办公室50英里(美国)或25英里(非美国,具体国家)以内,则预计每周至少在办公室工作四天。此期望受当地法律约束,可能因司法管辖区而异。 职责 - 构建、维护和增强数据ETL管道,以低延迟和高吞吐量处理大规模数据,支持Copilot操作。 - 设计和维护高吞吐量、低延迟的实验报告管道,使数据科学家和产品团队能够衡量模型性能和用户参与度。 - 负责数据质量计划,包括监控、警报、验证和补救流程,以确保所有下游系统的数据完整性。 - 实施强大的模式管理解决方案,实现快速无缝的模式演变而不干扰下游消费者。 - 开发和维护支持机器学习模型训练和推理的实时和批处理要求的数据基础设施。 - 与ML工程师和数据科学家合作,优化数据访问模式并改善模型评估工作流的管道性能。 - 设计可扩展的数据架构,以处理不断增长的数据量和不断变化的业务需求。 - 为数据管道实施全面的监控和可观测性解决方案,包括SLA跟踪和自动警报。 - 与跨职能团队合作,了解数据需求并将其转化为高效的技术解决方案。 资格要求 必备资格 - 计算机科学、数学、软件工程、计算机工程或相关领域的硕士学位,并具有4年以上商业分析、数据科学、软件开发、数据建模或数据工程经验 - 或计算机科学、数学、软件工程、计算机工程或相关领域的学士学位,并具有6年以上商业分析、数据科学、软件开发、数据建模或数据工程经验 - 或同等经验。 优先资格 - 使用Apache Spark、Kafka或类似分布式处理框架构建和维护大规模生产数据管道的经验。 - 为数据处理应用程序编写生产质量的Python、Scala或Java代码的经验。 - 构建和扩展实验框架的经验。 - 使用云数据平台(Azure、AWS或GCP)及其数据服务的经验。 - 模式管理和数据治理实践的经验。 - 实时数据处理和流架构的经验。 - 使用Airflow、Prefect、Dagster或类似工作流管理系统的数据编排框架的经验。 - 使用容器化技术(Docker、Kubernetes)进行数据管道部署的经验。 - 在数据质量框架和监控解决方案方面的经验。 软件工程IC5 - 此角色在美国的典型基本薪酬范围为每年139,900美元至274,800美元。在旧金山湾区和纽约市大都会区的特定工作地点适用不同的范围,此角色在这些地点的基本薪酬范围为每年188,000美元至304,200美元。 某些角色可能有资格获得福利和其他补偿。请在此处查找其他福利和薪酬信息: https://careers.microsoft.com/us/en/us-corporate-pay 软件工程IC6 - 此角色在美国的典型基本薪酬范围为每年163,000美元至296,400美元。在旧金山湾区和纽约市大都会区的特定工作地点适用不同的范围,此角色在这些地点的基本薪酬范围为每年220,800美元至331,200美元。 某些角色可能有资格获得福利和其他补偿。请在此处查找其他福利和薪酬信息: https://careers.microsoft.com/us/en/us-corporate-pay 此职位将至少开放5天,申请将持续接受,直到职位填满。 微软是一个平等机会雇主。所有合格的申请者将在不考虑年龄、祖籍、国籍、肤色、家庭或医疗护理假、性别认同或表达、遗传信息、移民身份、婚姻状况、医疗状况、国籍、身体或精神残疾、政治派别、受保护的退伍军人或军人身份、种族、民族、宗教、性别(包括怀孕)、性取向或任何其他受适用地方法律、法规和条例保护的特征的情况下获得就业考虑。如果您在申请过程中需要宗教便利和/或因残疾而需要合理便利,请阅读更多关于请求便利的信息。