我们的客户目前正在寻找一位领先的大数据开发者/架构师。这份工作将有以下职责:
- 使用Hadoop进行大数据的分析、设计和开发,并记录技术设计。
- 使用Kafka、Spark和Hive开发数据管道,用于摄取、转换和分析数据。
- 使用Sqoop将表从关系型数据库迁移到Hive表。
- 从各种数据源中提取客户数据到HDFS,创建数据湖。
- 领导一支初级开发团队。
资格和要求:
- 在大数据分析方面有经验,熟悉Hadoop生态系统的主要组件,如Map Reduce、HDFS、Hive、Pig、HBase、Zookeeper、Sqoop、Oozie、Flume、Storm、YARN、Spark、Spark Streaming、Spark SQL、NiFi、Kafka和Impala。
- 有领导团队的经验。
- 优秀的沟通能力。
ID:584901
类型:合同
薪资:面议。
预计薪资:根据资质,每小时20至28美元。