**职位描述
• 负责在多个Hadoop、Kafka、Hbase和Spark集群上执行大数据平台的管理和工程活动**监控平台的健康状况,生成性能报告,监控并提供持续改进
• 负责在多个Hadoop、Kafka、Hbase和Spark集群上执行大数据平台的管理和工程活动**监控平台的健康状况,生成性能报告,监控并提供持续改进
• 与开发、工程和运营团队密切合作,共同努力完成关键交付物,确保生产可扩展性和稳定性
-
开发和改进平台最佳实践
• 确保Hadoop平台能够有效满足性能和SLA要求
• 负责大数据生产环境,包括Hadoop(HDFS和YARN)、Hive、Spark、Livy、SOLR、Oozie、Kafka、Airflow、Nifi、Hbase等
• 具有Hadoop管理员、Hive、Spark、Kafka的实际经验,具备维护、优化、问题解决大数据大规模集群以支持业务用户和批处理的经验
• 有NoSQL数据库HBASE的实际经验是一个加分项
• 具备Linux / Unix操作系统服务、管理、Shell、awk脚本编写的经验是一个加分项