Hadoop管理员

16个月前全职
OX CONSULTANCY PTE. LTD.

OX CONSULTANCY PTE. LTD.

location 新加坡
unsaved
**职位描述 • 负责在多个Hadoop、Kafka、Hbase和Spark集群上执行大数据平台的管理和工程活动**监控平台的健康状况,生成性能报告,监控并提供持续改进 • 负责在多个Hadoop、Kafka、Hbase和Spark集群上执行大数据平台的管理和工程活动**监控平台的健康状况,生成性能报告,监控并提供持续改进 • 与开发、工程和运营团队密切合作,共同努力完成关键交付物,确保生产可扩展性和稳定性 - 开发和改进平台最佳实践 • 确保Hadoop平台能够有效满足性能和SLA要求 • 负责大数据生产环境,包括Hadoop(HDFS和YARN)、Hive、Spark、Livy、SOLR、Oozie、Kafka、Airflow、Nifi、Hbase等 • 具有Hadoop管理员、Hive、Spark、Kafka的实际经验,具备维护、优化、问题解决大数据大规模集群以支持业务用户和批处理的经验 • 有NoSQL数据库HBASE的实际经验是一个加分项 • 具备Linux / Unix操作系统服务、管理、Shell、awk脚本编写的经验是一个加分项