职位描述和要求:
必须具备:
Hadoop管理员,Python,Java
寻找至少5年以上的Hadoop经验。
• 通过Hortonworks(HDP)分发使用安装、配置、支持和管理Hadoop集群的实际经验。技术栈包括HDFS、Map Reduce、YARN、Hive、Oozie、Spark、Flume、HCatalog、Sqoop、Ranger、Ni-Fi、HBase、Kafka。
• 在广泛了解Hadoop组件和Hadoop生态系统架构的基础上,具备系统架构设计和部署经验。
• 在Hortonworks分发和使用Apache Hadoop二进制文件中规划、安装和配置Hadoop集群方面具有良好经验。
• 安装和配置Hadoop生态系统,如Hive、Zookeeper、Oozie、Flume、Impala、Spark。
• 使用Hadoop Core、HDFS、MapReduce、Yarn、HBase、Hive、Pig、Zookeeper、Oozie、Spark进行开发和测试环境设置安装和配置。
• 与系统工程团队合作,计划部署新的Hadoop环境和扩展现有的Hadoop集群,并进行容量规划。
• 具备在集群的最佳性能下,委托、退役、平衡和管理节点的经验。
• 监控和解决Linux内存、CPU、操作系统、存储和网络问题的经验。
• 有效的问题解决能力和出色的人际交往能力。能够独立工作,也能够在团队环境中工作。