高级数据工程师

15个月前合同
OnX Canada

OnX Canada

location 多伦多
unsaved
OnX正在为我们在多伦多的一位客户寻找一名高级数据工程师合同工。 客户:咨询公司 地点:Vaughan,每月2天 持续时间:6个月,有很高的延长可能性 您在这个职位上的优势 · 5-8年的数据工程经验, · 5-8年的云计算经验,最好是Azure, · 对现代数据湖范式和数据生命周期有深入理解, · 3-5年的Spark或Hadoop数据管道构建经验, · 3-5年的与Databricks等大数据框架合作经验, · 5年以上在结构化数据库和非结构化数据库中工作的经验, · 在Spark和SQL的性能调优方面有丰富经验, · 在使用github、Azure DevOps、Jenkins等DevOps平台方面有丰富经验, · 在指导初级团队成员方面有丰富经验, · 在数据湖和数据集市/数据仓库中的数据建模方面有丰富经验, · 优秀的口头和书面沟通能力, · 强大的自我问题解决、分析和批判性思维能力, 您将要做的事情 · 支持企业分析总监和数据架构师,确保团队活动的质量和敏捷性, · 直接与客户合作,支持各种项目和解决方案, · 作为数据工程团队的成员,协作构建可扩展、可维护和高性能的数据工程和分析解决方案, · 支持和解决解决方案中的问题和错误,并进行根本原因分析,以提出与企业分析战略一致的解决方案, · 确定改进和扩展我们的Azure架构和数据解决方案设计的领域, · 设计和实施CI/CD流水线及其最佳实践, · 与EA项目经理和企业分析团队合作,实施数据架构师创建的设计, • 参与讨论,不断改进架构和解决方案, • 基于企业标准创建和维护文档, • 利用和推广数据工程最佳实践, • 利用和推广数据治理最佳实践, • 指导和支持初级和中级数据工程师和数据分析师