Hadoop数据工程师

芝加哥 4天前全职 网络
面议
描述 • 首页 • 搜索职位 • 职位描述 Hadoop数据工程师 合同:美国伊利诺伊州芝加哥 薪资范围:60.00 - 65.00 | 每小时 职位代码:366513 结束日期:2026-01-22 剩余时间:0天,2小时 申请 职位名称:Hadoop数据工程师 地点:芝加哥,伊利诺伊州 工作安排:现场 客户行业:金融服务 期限:12个月合同 时间表:标准工作时间(周一至周五,上午8点至下午5点) 日常工作: • 使用Spark结构化流、MapReduce和其他大数据框架设计、开发和维护批处理和近实时数据管道。 • 从多个来源(如消息队列(Kafka)、文件共享、REST API和关系数据库)摄取数据。 • 在HDFS、Hive、Impala或Spark SQL中转换、清理和验证数据。 • 转换和管理JSON、CSV、XML等格式的数据以支持下游分析。 • 执行数据验证、分析和分析以识别异常并确保数据完整性。 • 解决数据管道、SQL作业或Spark应用程序中的问题,包括运行缓慢的作业或故障。 必须具备: • 强大的SQL技能 - 至少掌握MySQL、HIVE、Impala、SPARK SQL中的一种或多种 • 从消息队列、文件共享、REST API、关系数据库等进行数据摄取的经验,以及处理json、csv、xml等数据格式的经验 • 使用SPARK结构化流的经验 • 使用Hadoop/大数据和分布式系统的经验 • 使用Spark、Sqoop、Kafka、MapReduce、NoSQL数据库如HBase、SOLR、CDP或HDP、Cloudera或Hortonworks、Elastic Search、Kibana等的工作经验 • 至少掌握Scala、Python、PHP中的一种编程经验 加分项: • 具有银行经验 • 具有Service Now经验 薪酬 • 时薪:每小时$60 - $65 这反映了基础薪酬,可能会根据候选人资格有所不同。 福利 公司为该职位提供以下福利,具体适用资格要求:医疗保险、牙科保险、视力保险、401(k)退休计划、人寿保险、长期残疾保险、短期残疾保险、付费停车/公共交通、带薪休假、带薪病假和安全时间、带薪假期时间、带薪育儿假周数和带薪假期 - 如适用。 关于我们 在Collabera,我们不仅提供工作机会,还构建职业生涯。作为全球人才解决方案的领导者,我们提供与顶级组织、尖端技术和动态团队合作的机会。我们的文化以创新、协作和追求卓越为核心。通过持续学习、职业成长和以人为本的方法,我们赋予您实现全部潜力的能力。加入我们,成为重视激情、诚信和影响力的公司的一员。 职位要求 • Hadoop • 数据工程 • Cloudera • Spark 联系招聘人员 • 招聘人员 • 电子邮件 • 电话 • Dharamveer Kushwah • dharamveer.kushwah@collabera.com 立即申请