应具备强大的Hadoop和Elasticsearch集群经验-专家级别..建立集群、设计和架构
优选地点为Alpharetta>>也接受远程候选人
ELK + Hadoop
所需技能:
1. 从零开始设置Elasticsearch集群并进行服务器维护的专家。
2. 从零开始设置Hadoop集群并进行服务器维护的专家。
3. 在ELK Stack和Hadoop方面拥有7年以上的经验: Elasticsearch、Logstash、Kibana、Apache Hadoop。
4. 能够创建和调试复杂的Unix shell脚本。
5. 服务器的停用和重新启用。
6. 分析和解决集群问题。
7. 评估现有的Elastic集群、配置参数、索引、安全性和管理。
8. 建立和维护适当的基础设施以保持性能和数据完整性。
9. 具备Elasticsearch升级经验并遵循最佳实践。
10. 确保对Elasticsearch集群进行适当的监控和警报。
11. 精通网络和安全设置,以支持与网络相关的流程。
12. 最好具备Ruby和/或Python、Unix和GIT知识。
13. 部署和维护Hadoop集群
14. 向Hadoop集群添加和移除节点。
15. 实施、管理和管理整个Hadoop基础架构。
16. 容量规划,并估计降低或增加Hadoop集群容量的需求。
17. 监控Hadoop集群的连接性和性能,供应用团队使用。
18. 将大量数据从一个Hadoop集群复制到另一个集群。
19. 应用加密以保护Hadoop集群中的数据。
20. 应用配置更改并测试集群。
21. 熟悉Hadoop服务- HDFS、Hive、HBase、Impala、Hue、Ranger等。
22. 具备Cloudera CDP Hadoop升级经验将是一个优势。