高级数据工程师/负责人(Azure/跨国公司)

新加坡 2天前全职 网络
面议
角色与职责 职责 - 领导Azure企业云数据平台的设计、开发和日常运营。 - 使用Azure Databricks和PySpark构建和维护可扩展的数据管道。 - 使用Azure Data Factory设计和管理数据摄取和编排工作流。 - 使用Unity Catalog实施和管理数据治理、访问控制和元数据。 - 开发和维护Lakehouse数据模型(青铜、白银、黄金层)。 - 优化平台性能、可靠性和云成本,涵盖Databricks工作负载。 - 解决数据管道问题并推动平台的持续改进。 - 为数据工程师和利益相关者提供技术指导和最佳实践。 要求: - IT、计算机科学或相关技术领域的学位。 - 在生产环境中具有Azure Databricks和PySpark的丰富实践经验。 - 具有使用Azure Data Factory构建和编排数据管道的经验。 - 对数据治理、安全性和访问管理(包括Unity Catalog)有扎实的理解。 - 具有在Microsoft Azure上设计和支持可扩展云数据平台的经验。 请通过“立即申请”按钮提交您的Word格式的更新简历。 我们遗憾地通知,只有入围的候选人会被通知。 请将简历发送至: People Profilers Pte Ltd, 20 Cecil Street PLUS Building, Singapore 049705。 电话: EA许可证号码:02C4944 注册号码:R 发布人员:Ng Jwee Ken 参考:3WWYY79W 告诉雇主您具备的技能 数据摄取 Microsoft Azure PySpark 商业智能和数据分析 商业智能 Azure 管道 数据管道 Azure DevOps 架构师 Azure Data Factory ETL 商业智能架构 Databricks 数据治理 Unity 数据工程 Python 编排 数据仓储