高级 Azure 数据工程师 IV

3个月前合同
面议 Compunnel Inc.

Compunnel Inc.

location 多伦多
unsaved
职位名称:数据工程师 IV 角色中的典型日常/职责: • 在 Microsoft Azure 数据和分析 PaaS 服务中,具备开发批处理和实时数据管道、DevOps 管道及端到端流程的实践技术技能。 • 领导敏捷软件开发流程,包括路线图规划、跨团队协调、任务分配、代码审查、冲刺演示以及设计审查和签署。 • 将业务需求转化为技术解决方案,与开发团队、架构师和业务分析师合作,以确保遵循企业标准、架构和技术。利用 Azure 云数据技术交付企业数据解决方案的现代化,设计和构建现代数据管道、数据流和数据服务 API。 • 开发和维护数据仓库示意图、布局、架构以及关系/非关系数据库,以便进行数据访问和高级分析。通过 Power BI、Azure API 应用或其他现代可视化平台向最终用户展示数据。 • 指导其他员工并促进团队内及跨部门的知识转移。识别架构倡议的机会,并提出建议以增强平台和解决方案的可扩展性和稳健性。 • * 候选人要求/必须具备的技能: • 8-10 年设计和开发数据仓库及 ETL 工具的经验,重点在于 Azure 数据工程。 • 具备使用 Azure Data Factory、Databricks 和 PySpark 的 ETL 流程和自动化的实践经验。 • 精通 Azure Databricks、Azure Data Lake、Azure SQL 数据库、Azure Data Factory。 • 具备使用 CI/CD 工具(如 GitHub、Jenkins 和 Azure DevOps)配置和构建 CI/CD 管道的经验。 • 了解 BI 工具,如 PowerBI。 • 具备强大的人际交往、书面和口头沟通能力。 • 证明能有效优先处理和执行任务,在以团队为导向的协作工作环境中表现出色。 • * 教育背景: • 必须具备计算机科学、计算机工程或相关领域的学士学位。