职位:高级/首席数据工程师
地点:加拿大新不伦瑞克省(远程)
期限:6个月以上
职责
使用Azure Synapse和Microsoft Fabric设计、开发和维护数据管道和编排工作流。
构建、增强和支持本地数据存储和企业数据仓库的ETL流程。
使用Spark、PySpark、SQL和Azure原生工具集成、转换和优化来自多个来源的结构化和半结构化数据。
利用Delta Lake、Azure Synapse和Fabric Lakehouses为数据湖仓和仓库解决方案的架构和设计做出贡献。
执行监控、调试、故障排除,并为ETL管道提供随叫随到的生产支持。
作为协作敏捷交付团队的一部分,参与项目规划、估算和代码审查。
支持数据和分析平台的环境、平台和运营管理。
资格
计算机科学、信息技术或相关领域的学士学位。
6年以上支持两个或多个DWH/ETL工具(如WhereScape RED、Data Manager、DataStage、Spark或类似平台)的经验。
具有强大的Azure数据服务经验,包括Azure数据湖、数据工厂和Synapse分析。
5年以上设计本地和/或云数据仓库和数据模型的经验。
具备CI/CD实践和版本控制系统(Git、Azure DevOps、GitHub)的工作知识。
需要受控商品资格和安全许可。
熟悉IBM Cognos Suite是一个优势。
核心能力
对细节有强烈关注,具备出色的问题解决和分析能力。
具有强大的人际交往和沟通能力的协作团队成员。
以客户为中心,积极挑战现状并推动持续改进。
技术上充满好奇心、以过程为导向,并致力于持续学习。
能够清晰地向技术和非技术利益相关者解释复杂的技术概念。
加分项 / 优势
具有Power BI经验。
拥有Azure Synapse或Microsoft Fabric的微软认证。