数据工程师 - Azure

多伦多 1天前全职 网络
面议
关于MIR Digital: 在MIR Digital,我们不仅仅是一家公司——我们是创新者、建设者和变革者的集体。我们相信,通过参与推动业务转型的有意义项目,赋予团队成员塑造自己成功的能力。随着技术专业人员网络的不断扩大,我们致力于提供有影响力的数字解决方案,使我们的客户在不断变化的世界中脱颖而出。 MIR Digital成立的使命是重新定义数字领域,已成为寻求尖端IT和业务解决方案的组织的可信赖合作伙伴。我们的团队在协作、专业知识和实现卓越成果的共同愿景中蓬勃发展。 这是您加入一个前瞻性团队并与MIR Digital一起发展职业生涯的机会。 关于职位: 我们正在寻找一位技术娴熟且注重细节的数据工程师加入我们的团队,支持在Azure数据平台上开发和维护强大的数据基础设施。此角色对于设计、构建和优化数据管道以及管理推动组织洞察的数据存储库、数据湖和数据仓库至关重要。 主要职责: - 使用Azure服务(如Azure Data Factory、Databricks和Azure Synapse Analytics)设计、构建和维护可扩展且高效的数据管道。 - 开发、实施和优化结构化和非结构化数据摄取的ETL/ELT工作流。 - 设计和管理数据湖、数据仓库和其他数据存储库,以支持高级分析和报告需求。 - 通过应用数据工程和元数据管理的最佳实践,确保数据质量、完整性和治理。 - 与数据分析师、数据科学家和业务利益相关者合作,了解需求并提供满足报告和分析需求的解决方案。 - 监控和排除管道性能故障,必要时进行改进。 - 实施和支持数据工程工作流的CI/CD管道和版本控制。 - 根据组织和监管要求应用数据安全和合规标准。 资格要求: - 4年以上数据工程角色经验,重点关注云平台。 - 熟练使用Azure数据平台工具,包括Data Factory、Synapse、Azure SQL、ADLS(Azure Data Lake Storage)和Databricks。 - 深刻理解数据建模、数据仓库概念和ETL/ELT流程。 - 拥有使用SQL、Python和/或PySpark进行数据转换的实际经验。 - 熟悉DevOps实践和工具(如Azure DevOps、Git)。 - 具备较强的问题解决能力,能够在快节奏、团队导向的环境中工作。 - 具有使用Spark或Hadoop等大数据技术的经验。 - 了解Power BI或其他可视化工具的仪表板集成。 - 接触过数据治理框架和工具(如Azure Purview)。 - 拥有Azure认证(如DP-203:Microsoft Azure数据工程)者优先。 为什么加入我们? - 成为一家充满活力和快速发展的科技公司的一员。 - 与提供尖端软件和技术解决方案的创新团队密切合作。 - 在科技行业提供有竞争力的薪酬、福利和职业发展机会。 立即申请!