Hadoop管理员(现场面试)

芝加哥 4天前合同 网络
面议
角色:Hadoop管理员 地点:芝加哥,伊利诺伊州 / 夏洛特,北卡罗来纳州 工作安排:混合模式(每周3天现场) 面试流程:2轮(WebEx + 现场) 使命: 我们正在寻找一名Hadoop管理员,以支持我们基于大数据技术构建的NextGen平台。该角色将专注于Hadoop、Spark、Kafka和容器化环境的现代化和整合。 主要职责: 参与多个项目的复杂和高可见性计划。 提供Hadoop和数据科学平台操作方面的专业知识,包括Cloudera Hadoop、Jupyter Notebook、OpenShift和Docker容器环境。 管理所有环境中的平台操作:升级、部署、错误修复、监控、预测和灾难恢复。 作为客户合作伙伴、供应商和项目经理之间的联络人,提供技术解决方案。 支持基于Hadoop、Spark、Kafka、Kubernetes/OpenShift、Docker/Podman和Jupyter Notebook构建的平台。 维护和支持AI/ML平台,如Cloudera、DataRobot、C3 AI、Talend、Trifacta、ELK及相关工具。 负责事件响应、问题管理、容量规划和系统可靠性。 使用Ansible、Shell脚本和Python自动化平台操作。 在敏捷环境中与开发团队合作。 必备技能: 精通Hadoop架构、HDFS和Hadoop集群管理。 具有AD/Kerberos身份验证集成的实际操作经验。 精通Cloudera Hadoop组件:HDFS、Sentry、HBase、Kafka、Impala、SOLR、Hue、Spark、Hive、YARN、Zookeeper和Postgres。 具有集群配置优化、升级和故障排除的经验。 具备强大的脚本编写和自动化技能(Python、Shell、Ansible)。 具有监控、警报和作业调度系统的经验。 具备SQL、Cassandra和Postgres数据库的工作知识。 具备强大的Unix和SQL脚本技能。 具有在敏捷开发环境中工作的经验。 请分享合适的简历,并附上可用性和费率详情。