标题:Hadoop开发人员
经验:10年以上
持续时间:长期
签证状况:H1b,OPT EAD。
注意:仅限W2
我们正在寻找一名熟练的Hadoop开发人员,帮助构建大数据基础设施和存储软件。您的主要职责将是设计、构建和维护Hadoop基础设施。您还可能需要评估现有的数据解决方案、编写可扩展的ETL、编制文档并对员工进行培训。
作为一名优秀的Hadoop开发人员,您应该具备深入的Hadoop API知识、高级编程技能和项目管理能力。最终,一流的Hadoop开发人员设计和实施定制的Hadoop应用程序,以管理当前和未来的大数据基础设施。
Hadoop开发人员职责:
• 与开发团队会面,评估公司的大数据基础设施。
• 设计和编码Hadoop应用程序以分析数据集合。
• 创建数据处理框架。
• 提取数据并隔离数据集群。
• 测试脚本并分析结果。
• 排除应用程序错误。
• 维护公司数据的安全性。
• 创建数据跟踪程序。
• 生成Hadoop开发文档。
• 对员工进行应用程序使用培训。
Hadoop开发人员要求:
• 软件工程或计算机科学学士学位。
• 曾任Hadoop开发人员或大数据工程师的经验。
• 对Hadoop生态系统及其组件有深入了解。
• 熟悉Hive、HBase和Pig。
• 熟悉MapReduce和Pig Latin脚本。
• 掌握包括JavaScript、Node.js和OOAD在内的后端编程语言。
• 熟悉包括Squoop和Flume在内的数据加载工具。
• 高级分析和解决问题的能力。
• 良好的项目管理和沟通能力。