您好,
请告知我是否有适合以下职位的人选
谢谢
高级Python工程师 | 数据工程师。
地点:伊利诺伊州芝加哥
持续时间:长期
最初远程(仅限W2)
请将简历发送至或847-350-1008
工作内容:
• 我的客户不使用任何ETL工具-所有管道都是使用Python和SQL自定义构建的。
• 参与需求收集:与关键业务合作伙伴团队和其他数据工程人员合作,了解分析平台的部门级数据需求。
• 设计数据管道:与其他数据工程人员合作,对从各种内部和外部来源流入分析平台的数据进行整体设计。
• 使用Python和SQL从头开始构建数据管道:利用标准工具集,开发ETL/ELT代码,将数据从各种内部和外部来源移动到分析平台。
• 支持数据质量计划:与数据质量工程师合作,确定自动化的质量检查和相关监控。
• 对定义、实施和支持的关键贡献者:
• 数据服务
• 数据字典
所需技能和经验:
• 强大的ELT/ETL设计师/开发人员
• 精通SQL和Python
• 使用SQL进行性能调优
• 结构化和非结构化数据专业知识
• 云环境开发和运维经验(GCP,AWS)
• 倾向于有以下经验的候选人:
• Google Cloud Platform(GCP)及其相关服务;例如,Big Query、GCS、Cloud Composer、Dataproc、Dataflow、Dataprep、Cloud Pub/Sub、Metadata DB、Data Studio、Datalab、其他工具Apache Airflow(调度程序)、Bitbucket
• 实时数据复制/流式传输工具
• 数据建模
Charan Kumar | IVY Tech Sols Inc.
3403 N Kennecott Avenue, Suite B&C Arlington Heights, IL 60004
(直线电话:(847)350-1008
• |Gtalk:charan.ivytech|
由JazzHR提供支持