芝加哥电子商务公司招聘高级Python工程师|数据工程师。客户要求拥有优秀经验的高级Python工程师,能够从头开始构建数据流水线。客户不使用或希望使用ETL工具来构建数据流水线。
由于COVID-19,最初资源将远程工作;最终,资源将需要在芝加哥或伊利诺伊州布法罗格罗夫的现场工作。
工作内容:
• 我的客户不使用任何ETL工具-所有流水线都是使用Python和SQL自定义构建的。
• 参与需求收集:与关键业务伙伴团队和其他数据工程人员合作,了解分析平台的部门级数据需求。
• 设计数据流水线:与其他数据工程人员合作,为将来自各种内部和外部来源的数据流入分析平台设计整体方案。
• 使用Python和SQL从头构建数据流水线:利用标准工具集,开发ETL/ELT代码,将数据从各种内部和外部来源移动到分析平台。
• 支持数据质量计划:与数据质量工程师合作,确定自动化质量检查和相关监控。
• 对定义、实施和支持的关键贡献者:
• * 数据服务
• 数据字典
所需技能和经验:
• 强大的ELT/ETL设计师/开发人员
• 精通SQL和Python
• 使用SQL进行性能调优
• 结构化和非结构化数据专业知识
• 云环境开发和运营经验(GCP、AWS)
• 偏好具有以下经验的候选人:
• * Google Cloud Platform(GCP)及其相关服务;例如,Big Query、GCS、Cloud Composer、Dataproc、Dataflow、Dataprep、Cloud Pub/Sub、Metadata DB、Data Studio、Datalab、其他工具Apache Airflow(调度程序)、Bitbucket
• 实时数据复制/流处理工具
• 数据建模
入职要求
成功完成背景调查。
面试流程
• 一次电话面试,然后进行一次MS Teams面试;候选人必须在芝加哥当地;COVID-19后需要进行现场工作。
由JazzHR提供支持。