数据工程师(仅限W2)

16个月前合同
Spanco Solutions

Spanco Solutions

location 纽约
unsaved
注意:此职位仅限W2,不接受C2C/1099 职位/头衔:Hadoop应用支持主管 地点:特拉华州纽瓦克 合同期限:18个月合同 经验:10年以上 注意事项: • 仅接受W2,不接受C2C/1099 • 仅接受美国公民/绿卡持有者/绿卡EAD持有者/H4 EAD持有者/OPT EAD持有者 • 不接受远程工作或初始远程工作 • 候选人必须具备金融服务行业经验 描述: Hadoop应用支持主管能够在Hadoop数据湖中工作一个或多个应用程序。 能够支持现有的Hadoop应用程序。 能够在轮班制(24x7)下支持应用程序。 职位概述 • 支持多个具有竞争性截止日期的项目 • 监督应用支持团队的工作 • 故障作业的排查和修复 • 与上下游应用程序合作解决任何延迟或数据问题 • 能够生成并提交报告给高级管理人员 • 对Hadoop生态系统(Cloudera)有深入的理解和经验。能够理解和探索不断发展的Hadoop生态系统中的工具,并将其适用于相关的问题。 • 在生产环境中使用大数据实施的经验 • 具备HDFS、Map Reduce、Hive、impala、Spark、Kafka和Linux/Unix技术的经验是必需的 • 具备Unix shell脚本编写的经验是必需的 • 能够分析现有的shell脚本/Python/Perl代码以调试任何问题或改进代码 • 对关系数据库(SQL)有扎实的知识和大型基于SQL的系统的经验。 • 在各种数据仓库项目中具有强大的IT咨询经验,处理大数据量,构建大数据环境。 • 对算法、数据结构、性能优化技术和团队环境中的软件开发有深入理解。 • 在算法和软件出现关键问题时进行基准测试和调试。 主要技能 Hadoop 次要技能 Kafka 第三技能 核心Java 所需技能 • 本科学位,技术或商业相关领域,或等同的教育和相关培训 • 七年的数据仓库架构方法经验,至少四年的大数据(Cloudera)经验 • 具备分布式系统的接触和扎实的工作知识 • 出色的理解客户服务模型和客户导向的服务交付 • 能够通过考虑受影响区域的所有潜在选项来把握解决方案的“大局”思维能力 • 适应理解和适应新技术 • 以协作的方式与团队成员、业务伙伴和管理团队合作,实现共同目标 • 必须具备准备并向大型和小型团队就技术和功能主题进行演示的演示技巧 期望技能 • 以前在金融服务行业的经验 • 以前的生产支持经验 • 广泛的BofA技术经验,对现有的测试/运营流程有良好的理解,并对如何改进这些流程持开放态度 • 对行业趋势和相关应用技术的理解 • 设计和实施分析环境和商业智能解决方案的经验