大数据 Hadoop 管理员

新加坡 16天前全职 网络
面议
在典型的系统管理角色中至少有8年的经验,执行系统监控、存储容量管理、性能调优和系统基础设施开发。 至少有1-2年部署和管理大型Hadoop集群的经验。 在金融和银行业有经验。 必须是学士/工程学位毕业生。 具有Java/Python/Perl/PHP/CSS/HTML等语言开发经验的候选人将被优先考虑。 有Spark开发经验者更佳。 具备Hadoop生态系统(Hadoop, Hive, Pig, Oozie, Hbase, Flume, sqoop)的工作知识,能够使用自动化工具集和手动流程。 能够使用系统和Hadoop日志以及监控/警报系统组合来隔离和排除Hadoop服务问题。具有Apache Ambari经验者优先。 优先考虑有管理Hadoop 2.0集群经验的人员,包括YARN和基于YARN的应用程序如Spark。 具备Linux管理技能将是一个额外的优势。 详细了解基本操作系统管理任务,如配置PAM认证、磁盘配额、ulimit等,以及管理安全补丁。 工作时间主要与欧洲工作时间相匹配。 需要轮班提供随叫随到的支持,如新加坡正常班次和EMEA班次。