职位描述
我们正在寻找一位数据平台技术负责人,负责在 Microsoft Azure 和 Databricks 上设计、构建和运营现代云数据平台。
这个职位非常适合喜欢架构可扩展数据解决方案、制定工程标准并指导团队最佳实践的资深数据工程师,而无需担任人员管理角色。
您将与数据工程师、应用团队和业务利益相关者密切合作,提供支持分析和业务决策的安全、可靠和高性能的数据平台。
主要职责
• 领导企业级 Azure Databricks 数据平台的技术设计和演进
• 设计和实施数据摄取、转换和编排管道
• 构建和维护 Lakehouse 架构(青铜/白银/黄金层)
• 使用 Unity Catalog 实施数据治理、访问控制和元数据管理
• 与源系统团队合作,提供安全可靠的数据集成
• 优化平台性能、可扩展性和云成本效率
• 定义和执行数据工程标准、CI/CD 实践和操作指南
• 排除复杂平台问题并推动持续改进
• 为数据工程师和分析师提供技术指导和指导
• 将业务需求转化为可扩展的技术数据解决方案
要求
• 至少5年数据工程或数据平台开发经验
• 拥有以下方面的丰富实践经验:
• Azure Databricks
• PySpark
• Delta Lake
• Unity Catalog
• 具有 Azure Data Factory 的经验
• 对分布式数据处理和 Lakehouse 设计有良好理解
• 具备构建可扩展 ETL / ELT 管道的经验
• 熟悉 CI/CD 管道(Azure DevOps 或 GitHub Actions)
• 具备较强的沟通和利益相关者参与能力
工作时间:周一至周五,上午9:00 – 下午6:00。工作安排:混合模式(2天现场,3天远程)。工作地点:西新加坡,公共交通便利
#数据工程 #数据平台 #AzureDatabricks #AzureDataFactory #UnityCatalog #PySpark #DeltaLake
原始职位数据平台技术负责人/Azure/Databricks/发布于 GrabJobs ©。如对该职位有任何问题,请使用 GrabJobs 上的“报告职位”按钮。