角色与职责
职责
- 领导Azure企业云数据平台的设计、开发和日常运营。
- 使用Azure Databricks和PySpark构建和维护可扩展的数据管道。
- 使用Azure Data Factory设计和管理数据摄取和编排工作流。
- 使用Unity Catalog实施和管理数据治理、访问控制和元数据。
- 开发和维护Lakehouse数据模型(青铜、白银、黄金层)。
- 优化平台性能、可靠性和云成本,涵盖Databricks工作负载。
- 解决数据管道问题并推动平台的持续改进。
- 为数据工程师和利益相关者提供技术指导和最佳实践。
要求:
- IT、计算机科学或相关技术领域的学位。
- 在生产环境中具有Azure Databricks和PySpark的丰富实践经验。
- 具有使用Azure Data Factory构建和编排数据管道的经验。
- 对数据治理、安全性和访问管理(包括Unity Catalog)有扎实的理解。
- 具有在Microsoft Azure上设计和支持可扩展云数据平台的经验。
请通过“立即申请”按钮提交您的Word格式的更新简历。
我们遗憾地通知,只有入围的候选人会被通知。
请将简历发送至:
People Profilers Pte Ltd, 20 Cecil Street PLUS Building, Singapore 049705。
电话:
EA许可证号码:02C4944
注册号码:R
发布人员:Ng Jwee Ken
参考:3WWYY79W
告诉雇主您具备的技能
数据摄取
Microsoft Azure
PySpark
商业智能和数据分析
商业智能
Azure
管道
数据管道
Azure DevOps
架构师
Azure Data Factory
ETL
商业智能架构
Databricks
数据治理
Unity
数据工程
Python
编排
数据仓储