职位名称:Hadoop和ElasticSearch专家
工作地点:远程
职位类型:合同
职位描述:
要求:
1. 精通从头搭建Elasticsearch集群和服务器维护。
2. 精通从头搭建Hadoop集群和服务器维护。
3. 在ELK Stack和Hadoop方面有7年以上的经验:Elasticsearch、Logstash、Kibana、Apache Hadoop。
4. 能够创建和调试复杂的Unix shell脚本。
5. 服务器的下线和上线。
6. 分析和解决集群问题。
7. 评估现有的Elastic集群、配置参数、索引、安全性和管理。
8. 建立和维护适当的基础设施以保持性能和数据完整性。
9. 有Elasticsearch升级经验并遵循最佳实践。
10. 确保对Elasticsearch集群进行适当的监控和警报。
11. 精通网络和安全设置以支持与网络相关的流程。
12. 最好具备Ruby和/或Python、Unix和GIT知识。
13. 部署和维护Hadoop集群。
14. 对Hadoop集群的节点进行上线和下线。
15. 实施、管理和管理整个Hadoop基础设施。
16. 容量规划和估算Hadoop集群容量的要求。
17. 监控Hadoop集群的连接性和性能,为应用团队提供支持。
18. 将大量数据从一个Hadoop集群复制到另一个Hadoop集群。
19. 应用加密以保护Hadoop集群中的数据。
20. 应用配置更改并测试集群。
21. 对Hadoop服务有扎实的了解 - HDFS、Hive、HBase、Impala、Hue、Ranger等。
22. 有Cloudera CDP Hadoop升级经验者优先考虑。
如果您认为自己符合此职位的要求,并且目前正在找工作或有兴趣换工作,请将简历和联系方式发送至roshni@nytpcorp.com。