OnX正在为我们在多伦多的一位客户寻找一名高级数据工程师合同工。
客户:咨询公司
地点:Vaughan,每月2天
持续时间:6个月,有很高的延长可能性
您在这个职位上的优势
· 5-8年的数据工程经验,
· 5-8年的云计算经验,最好是Azure,
· 对现代数据湖范式和数据生命周期有深入理解,
· 3-5年的Spark或Hadoop数据管道构建经验,
· 3-5年的与Databricks等大数据框架合作经验,
· 5年以上在结构化数据库和非结构化数据库中工作的经验,
· 在Spark和SQL的性能调优方面有丰富经验,
· 在使用github、Azure DevOps、Jenkins等DevOps平台方面有丰富经验,
· 在指导初级团队成员方面有丰富经验,
· 在数据湖和数据集市/数据仓库中的数据建模方面有丰富经验,
· 优秀的口头和书面沟通能力,
· 强大的自我问题解决、分析和批判性思维能力,
您将要做的事情
· 支持企业分析总监和数据架构师,确保团队活动的质量和敏捷性,
· 直接与客户合作,支持各种项目和解决方案,
· 作为数据工程团队的成员,协作构建可扩展、可维护和高性能的数据工程和分析解决方案,
· 支持和解决解决方案中的问题和错误,并进行根本原因分析,以提出与企业分析战略一致的解决方案,
· 确定改进和扩展我们的Azure架构和数据解决方案设计的领域,
· 设计和实施CI/CD流水线及其最佳实践,
· 与EA项目经理和企业分析团队合作,实施数据架构师创建的设计,
• 参与讨论,不断改进架构和解决方案,
• 基于企业标准创建和维护文档,
• 利用和推广数据工程最佳实践,
• 利用和推广数据治理最佳实践,
• 指导和支持初级和中级数据工程师和数据分析师