主要技能要求领先的Hadoop管理员
- Hadoop(最好是Hortonworks / Open Distribution),HDFS,Hive,Kafka,Spark,Oozie / Airflow,HBase
- SQL和HQL的中级熟练程度
- 对Linux有扎实的理解和脚本技能将是优势
- 有Kerberos,TLS,Ranger和数据加密的经验
- 对Spark有基本到中级的经验
- 熟悉SQL。应能理解和实施性能优化。
- 内存管理经验
- 在Hadoop / Cloudera环境中具备队列分配和分发经验
- 应能在生产环境中扩展集群,并具备18/5或24/5生产环境的经验。
- 熟悉一种编程语言。
- 对Hive和Hadoop系统有良好的了解,并具备监控工具的使用经验。Sqoop,Oozie和其他外部工具。
- 熟悉补丁升级