远程Python/Java数据工程师

15个月前远程合同
Skiltrek

Skiltrek

location 芝加哥
unsaved
职位描述 车辆数据控制中心数据工程师 在这个角色中,您将设计、构建和扩展数据管道,将数十亿条数据转化为可衡量的见解,用于全新的GCP数据生态系统。在这个角色中,您将与多个组织(模型e、产品开发、GDI&A)合作,将业务目标转化为数据管道解决方案。这个角色将在一个充满活力的团队中工作,并采用精益和敏捷的实践、软件最佳实践、自动化测试和CI/CD来构建和支持车辆数据通信中心。 最低要求 5年以上作为数据工程师的工作经验,负责创建批处理和实时数据系统。 * 熟练掌握Hive、Spark、Hadoop等大数据技术。 * 最近在以下技术栈上取得的成就:Cloud Dataflow、Dataproc、Big Query、SQL、Hive、Kafka、Cloud storage、Data Fusion、Sqoop、NoSQL * 自我激励,技术实力强,注重质量 * 熟悉性能调优SQL和ETL管道 * 熟练掌握Java或Python编程语言 * 出色的书面和口头沟通能力和人际交往能力首选技能:任何云认证 所需经验:5年以上作为数据工程师的工作经验,负责创建批处理和实时数据系统。 * 5年以上熟练掌握Hive、Spark、Hadoop等大数据技术