Python开发者

16个月前远程合同
Ivy Tech Solutions inc

Ivy Tech Solutions inc

location 芝加哥
unsaved
芝加哥电子商务公司招聘高级Python工程师|数据工程师。客户要求拥有优秀经验的高级Python工程师,能够从头开始构建数据流水线。客户不使用或希望使用ETL工具来构建数据流水线。 由于COVID-19,最初资源将远程工作;最终,资源将需要在芝加哥或伊利诺伊州布法罗格罗夫的现场工作。 工作内容: • 我的客户不使用任何ETL工具-所有流水线都是使用Python和SQL自定义构建的。 • 参与需求收集:与关键业务伙伴团队和其他数据工程人员合作,了解分析平台的部门级数据需求。 • 设计数据流水线:与其他数据工程人员合作,为将来自各种内部和外部来源的数据流入分析平台设计整体方案。 • 使用Python和SQL从头构建数据流水线:利用标准工具集,开发ETL/ELT代码,将数据从各种内部和外部来源移动到分析平台。 • 支持数据质量计划:与数据质量工程师合作,确定自动化质量检查和相关监控。 • 对定义、实施和支持的关键贡献者: • * 数据服务 • 数据字典 所需技能和经验: • 强大的ELT/ETL设计师/开发人员 • 精通SQL和Python • 使用SQL进行性能调优 • 结构化和非结构化数据专业知识 • 云环境开发和运营经验(GCP、AWS) • 偏好具有以下经验的候选人: • * Google Cloud Platform(GCP)及其相关服务;例如,Big Query、GCS、Cloud Composer、Dataproc、Dataflow、Dataprep、Cloud Pub/Sub、Metadata DB、Data Studio、Datalab、其他工具Apache Airflow(调度程序)、Bitbucket • 实时数据复制/流处理工具 • 数据建模 入职要求 成功完成背景调查。 面试流程 • 一次电话面试,然后进行一次MS Teams面试;候选人必须在芝加哥当地;COVID-19后需要进行现场工作。 由JazzHR提供支持。