Hadoop开发者

15个月前远程全职
Dice

Dice

location 芝加哥
unsaved
Dice是每个阶段职业生涯的技术专家的领先职业目的地。我们的客户Dexian Signature Consultants正在寻找以下职位。立即通过Dice申请! 职位摘要 Dexian正在寻找一名Hadoop开发人员,为位于伊利诺伊州芝加哥的客户提供机会。 职责: • 与开发团队会面,评估公司的大数据基础设施 • 设计和编码Hadoop应用程序以分析数据集合 • 创建数据处理框架 • 提取数据和隔离数据集群 • 测试脚本并分析结果 • 故障排除应用程序错误 • 维护公司数据的安全性 • 创建数据跟踪程序 • 生成Hadoop开发文档 要求: • 强大的SQL技能 - MySQL、HIVE、Impala、SPARK SQL中的一个或多个 • 从消息队列、文件共享、REST API、关系数据库等处获取数据的经验,以及对json、csv、xml等数据格式的经验 • 有SPARK Structured steaming的工作经验者优先 • 有Hadoop /大数据和分布式系统的工作经验 • 有管理/生产支持/调试的工作经验 • 有Spark、Sqoop、Kafka、MapReduce、HBase、SOLR、CDP或HDP、Cloudera或Hortonworks、Elastic Search、Kibana等的工作经验 • 至少精通Scala、Python、PHP或Shell脚本编程中的一种 • 具有Spark /MapReduce和/或SQL作业的性能调优经验 • 具有Linux操作系统的经验和熟练程度是必须的 • 有近实时和批处理数据管道的端到端设计和构建过程的经验 • 有敏捷开发过程的工作经验,并对软件开发生命周期的各个阶段有深入的理解 • 有使用SVN、Git、Bit Bucket等源代码和版本控制系统的经验 • 有使用Jenkins和Jar管理的经验 • 自发性强,能够在最少的监督下工作,并能够与各种技能背景的团队合作 • 能够理解客户需求并提供正确的解决方案 • 强大的分析能力,以帮助解决复杂的问题 • 渴望解决问题并深入研究潜在问题 • 重视适应并继续学习新技术的能力 Dexian是一家领先的人员配备、IT和劳动力解决方案提供商,在全球拥有超过12,000名员工和70个办事处。作为最大的IT人员配备公司和美国第二大少数民族拥有的人员配备公司之一,Dexian于2023年通过DISYS和Signature Consultants的合并而成立。结合其核心公司的最佳元素,Dexian的平台将人才、技术和组织连接起来,产生改变游戏规则的结果,帮助每个人实现他们的抱负和目标。 Dexian的品牌包括Dexian DISYS、Dexian Signature Consultants、Dexian Government Solutions、Dexian Talent Development和Dexian IT Solutions。访问了解更多信息。 Dexian是一家平等机会雇主,招聘和雇佣合格的候选人,不考虑种族、宗教、性别、性取向、性别认同、年龄、国籍、祖籍、公民身份、残疾或退伍军人身份。