角色:Hadoop管理员
地点:芝加哥,伊利诺伊州 / 夏洛特,北卡罗来纳州
工作安排:混合模式(每周3天现场)
面试流程:2轮(WebEx + 现场)
使命:
我们正在寻找一名Hadoop管理员,以支持我们基于大数据技术构建的NextGen平台。该角色将专注于Hadoop、Spark、Kafka和容器化环境的现代化和整合。
主要职责:
参与多个项目的复杂和高可见性计划。
提供Hadoop和数据科学平台操作方面的专业知识,包括Cloudera Hadoop、Jupyter Notebook、OpenShift和Docker容器环境。
管理所有环境中的平台操作:升级、部署、错误修复、监控、预测和灾难恢复。
作为客户合作伙伴、供应商和项目经理之间的联络人,提供技术解决方案。
支持基于Hadoop、Spark、Kafka、Kubernetes/OpenShift、Docker/Podman和Jupyter Notebook构建的平台。
维护和支持AI/ML平台,如Cloudera、DataRobot、C3 AI、Talend、Trifacta、ELK及相关工具。
负责事件响应、问题管理、容量规划和系统可靠性。
使用Ansible、Shell脚本和Python自动化平台操作。
在敏捷环境中与开发团队合作。
必备技能:
精通Hadoop架构、HDFS和Hadoop集群管理。
具有AD/Kerberos身份验证集成的实际操作经验。
精通Cloudera Hadoop组件:HDFS、Sentry、HBase、Kafka、Impala、SOLR、Hue、Spark、Hive、YARN、Zookeeper和Postgres。
具有集群配置优化、升级和故障排除的经验。
具备强大的脚本编写和自动化技能(Python、Shell、Ansible)。
具有监控、警报和作业调度系统的经验。
具备SQL、Cassandra和Postgres数据库的工作知识。
具备强大的Unix和SQL脚本技能。
具有在敏捷开发环境中工作的经验。
请分享合适的简历,并附上可用性和费率详情。