Hadoop平台管理员

15个月前远程全职
99.5K - 111K CAD Cognitive AI

Cognitive AI

location 多伦多
unsaved
公司描述 我们建议您在此输入详细信息 职位描述 这是一个位于安大略多伦多的混合角色,招聘Hadoop平台管理员,可部分远程工作。Hadoop平台管理员将负责设计、实施和支持大规模Hadoop基础架构,包括硬件、软件和服务。成功的候选人将维护和监控Hadoop集群以实现最佳性能和安全性,并计划和维护备份、复制和灾难恢复流程。Hadoop平台管理员还将与跨职能团队合作,识别业务机会并提供定制解决方案。 资格 • 信息技术或计算机科学学士学位或同等工作经验 • 3年以上Hadoop管理经验,包括安装、配置、调优和故障排除 • 3年以上大数据技术经验,包括HDFS、Hive、Pig、Spark、Kafka和MapReduce • 2年以上Linux/Unix操作系统和Shell脚本编程经验 • 2年以上资源管理和调度软件(YARN)经验 • 1年以上HDP或CDP版本经验 • 熟悉网络概念 • 能够独立工作和在团队环境中工作 • 出色的问题解决、分析和沟通能力 • 有云技术和DevOps工具使用经验者优先 • 在Hadoop环境中具备安全和合规标准经验者优先 • 有实际部署和维护Hadoop集群的经验。使用Cloudera Manager添加和删除节点。配置Name Node高可用性并跟踪所有运行的Hadoop作业。 • 解决与Hadoop平台相关的问题并实施修复。 • 性能改进和集群使用优化。 • 实施、管理和管理整个Hadoop基础架构。 • 集群健康监控和警报。 • 完成备份和恢复任务;提供资源和安全管理。 • 监控警报并提供必要的支持。