职位描述
我们正在寻找一位数据平台技术负责人，负责设计、构建和运营基于 Microsoft Azure 和 Databricks 的现代云数据平台。
该职位非常适合喜欢架构可扩展数据解决方案、制定工程标准并指导团队最佳实践的高级数据工程师——无需担任人员管理角色。
您将与数据工程师、应用团队和业务利益相关者密切合作，交付一个支持分析和业务决策的安全、可靠和高性能的数据平台。
主要职责
- 领导企业级 Azure Databricks 数据平台的技术设计和发展
- 设计和实施数据摄取、转换和编排管道
- 构建和维护 Lakehouse 架构（青铜/白银/黄金层）
- 使用 Unity Catalog 实施数据治理、访问控制和元数据管理
- 与源系统团队合作，提供安全可靠的数据集成
- 优化平台性能、可扩展性和云成本效率
- 定义并执行数据工程标准、CI/CD 实践和操作指南
- 解决复杂的平台问题并推动持续改进
- 为数据工程师和分析师提供技术指导和指导
- 将业务需求转化为可扩展的技术数据解决方案
要求
- 至少 5 年数据工程或数据平台开发经验
- 丰富的实际操作经验：
- Azure Databricks
- PySpark
- Delta Lake
- Unity Catalog
- 拥有 Azure Data Factory 的丰富经验
- 对分布式数据处理和 Lakehouse 设计有良好的理解
- 具备构建可扩展 ETL / ELT 管道的经验
- 熟悉 CI/CD 管道（Azure DevOps 或 GitHub Actions）
- 良好的沟通和利益相关者参与能力
工作时间：周一至周五，上午 9:00 – 下午 6:00。工作安排：混合模式（2 天现场，3 天远程）。工作地点：交通便利，新加坡西部。
#数据工程 #数据平台 #AzureDatabricks #AzureDataFactory #UnityCatalog #PySpark #DeltaLake
