高级数据工程师-EN

蒙特利尔 22天前全职 网络
面议
关于此职位 对您的领域充满热情吗?在寻找一个可以迎接挑战、创新、使用最先进工具并与各个领域专家合作的工作环境吗?想加入一家世界级公司和行业领导者,并为我们的项目和使命做出贡献而感到自豪吗?来加入我们的团队,与我们分享您的激情吧! 主要职责 我们正在寻找一位技术娴熟且积极进取的数据平台工程师加入我们的团队。此角色涉及管理和增强我们的企业数据平台,包括数据仓库(DWH)和数据湖,确保最佳性能和可扩展性。理想的候选人将拥有丰富的Terraform经验和各种数据技术的坚实背景。 职责 - 管理和增强企业数据平台,包括数据仓库(DWH)和数据湖,确保最佳性能和可扩展性。 - 设计、实施和维护强大可靠的数据管道架构,以满足业务需求,利用SQL和大数据技术如Hadoop、Spark和Kafka。 - 建立和监督高效的数据提取、转换和加载(ETL)基础设施,确保遵循最佳实践和标准。 - 实施DevOps实践,实现数据系统的持续集成和持续部署(CICD),提高灵活性和效率。 - 整合和管理来自多个来源的数据,包括外部和物联网数据,确保数据成为有价值的企业资产。 - 为分析师和数据科学家创建和维护后端数据解决方案,促进有见地的数据分析和决策。 - 识别和实施流程改进,例如自动化手动任务和优化数据交付,以提高效率和可扩展性。 - 与利益相关者合作,包括产品团队、数据专家和架构师,解决技术问题并支持数据基础设施需求。 - 确保遵守数据架构和安全标准,维护数据保护和隐私。 - 设置可观测性和监控系统,以跟踪数据管道的可靠性,并在发生事件时提供及时的运营支持。 - 与执行、CX、设计和开发团队合作,支持与数据相关的技术需求,并为数据和AI产品提出创新想法。 - 通过分享知识、贡献协作的工作环境和推广敏捷思维来激励和激发同事。 - 紧跟行业趋势和进步,提出创新想法和改进数据策略和交付流程。 资格 - 计算机科学、工程或相关领域的学士学位。硕士学位优先。 - 至少6年数据、编码和脚本(Python、Java、Scala、SQL、JavaScript、Bash)、设计和测试的行业经验。 - 扎实的算法和数据结构的计算机科学基础知识。 - 丰富的Terraform经验。 - 在动态环境中支持和与跨职能团队合作的经验。 - 大数据工具经验:Hadoop、Spark、Kafka。 - 关系型SQL和NoSQL数据库经验,包括SQL Server、PostgreSQL和CosmosDB。 - 自动化数据管道和工作流管理工具经验:DevOps、ARM、Azure Data Factory、Airflow。 - 微软云服务经验:Azure、Databricks、Fabric、Purview。 - 流处理系统经验:Storm、Spark-Streaming。 - 熟悉Kubernetes进行容器编排。 - 精通Power BI进行数据可视化和报告。 职位类型 常规 CAE感谢所有申请者的兴趣。然而,只有背景和经验符合职位要求的申请者将被联系。 平等机会雇主 CAE是一家平等机会雇主,致力于为所有申请者和员工提供平等的就业机会,不论种族、国籍、肤色、宗教、性别、性别认同和表达、性取向、残疾、神经多样性、退伍军人身份、年龄或其他受当地法律保护的特征。 如果您认为自己并未完全符合职位发布中列出的每一项要求,我们仍鼓励您联系并申请。在CAE,欢迎每个人为我们的成功做出贡献。需要合理便利的申请者应在招聘过程中的任何阶段联系他们的招聘人员。如果由于不兼容的辅助技术或残疾需要帮助提交申请,请通过CAECarrieres-Careers@cae.com联系我们。