弹性堆栈(ELK)与Hadoop - 仅限W2 - 亚特兰大,佐治亚州(或)远程
角色:ELK堆栈与Hadoop管理员
地点:亚特兰大,佐治亚州/远程
客户:摩根士丹利
工作类型:合同
所需技能:
1. 熟练设置Elasticsearch集群并进行服务器维护。
2. 熟练设置Hadoop集群并进行服务器维护。
3. 7+年ELK堆栈和Hadoop经验:Elasticsearch,Logstash,Kibana,Apache Hadoop
4. 能够创建和调试复杂的Unix shell脚本。
5. 服务器的停用和重新启用。
6. 分析和解决集群问题。
7. 评估现有的Elastic集群、配置参数、索引、安全性和管理。
8. 设置和维护适当的基础架构以保持性能和数据完整性。
9. 具备Elasticsearch升级经验并遵循最佳实践。
10. 确保适当监控和警报Elasticsearch集群。
11. 精通网络和安全设置,以支持与网络相关的流程。
12. 最好具备Ruby和/或Python、Unix和GIT知识。
13. 部署和维护Hadoop集群。
14. 将节点从Hadoop集群中启用和停用。
15. 实施、管理和管理整个Hadoop基础架构。
16. 容量规划和估计降低或增加Hadoop集群容量的需求。
17. 监控Hadoop集群连接性和性能,为应用团队提供支持。
18. 将大量数据从一个Hadoop集群复制到另一个集群。
19. 应用加密以保护Hadoop集群中的数据。
20. 应用配置更改并测试集群。
21. 熟悉Hadoop服务-HDFS、Hive、HBase、Impala、Hue、Ranger等。
22. 具备Cloudera CDP Hadoop升级经验将是一个优势。
软技能:
1. 良好的口头和书面沟通能力。
2. 良好的分析和解决问题的能力。
3. 良好的团队合作精神。
电子邮件:christian.florantine@concenttech.com