职位:RFSO编号000947-数据工程师2级
职位描述
我们的公共部门客户正在寻找一位经验丰富的数据工程师,提供为期两个月的全远程合同机会。此角色需要在Microsoft Azure环境中使用PySpark、Azure Data Factory和Databricks构建稳健的数据管道的专业知识。
安全要求
• 强制性:
加拿大政府可靠性状态安全许可
• 正在办理许可的候选人可以考虑,但这可能会延迟合同的开始。
主要职责
• 使用PySpark、Azure Data Factory和Databricks设计和实施数据管道
• 使用Azure Data Lake Storage(ADLS)并整合各种Azure数据服务
• 与利益相关者合作,了解数据需求并将业务需求转化为技术解决方案
• 在云环境中开发,主要是Microsoft Azure
所需技能和经验
• 在数据工程方面有丰富的实践经验,专注于管道开发
• 精通SQL、PySpark、ADLS、Databricks和Azure Data Factory
• 对基于SQL的关系型操作数据库有扎实的理解
• 具有云开发经验(最好是Microsoft Azure)