大数据开发者

16个月前全职
Dice

Dice

location 洛杉矶
unsaved
Dice是每个职业阶段的技术专家的领先职业目的地。我们的客户Shimento公司正在寻找以下职位。立即通过Dice申请! 职位名称:大数据工程师 地点:在这个疫情期间,远程工作也可以接受。优先考虑旧金山湾区的候选人。我们将根据需要增加更多的地点。 时长:12-18个月 我们正在寻找一名大数据工程师加入高级数据和分析能力团队。我们是旧金山的一个团队,与客户系统的各个业务线合作,提供大数据和高级分析产品和解决方案。在这个角色中,您将有机会为多个高质量的数据解决方案做出贡献,并在许多领域提高您的技术技能。 主要职责 • 使用开源、现代数据湖和企业数据仓库技术(Hadoop、Spark、Cloud等)设计、开发和维护端到端的数据解决方案 • 在整个数据解决方案的生命周期中贡献多个数据解决方案(从构思到发布) • 与业务利益相关者合作,了解并满足他们的数据需求 • 设计、构建和维护机器学习数据管道 • 根据银行安全政策保持安全性 • 参与敏捷开发环境 云/ AWS是一个不错的选择。 资格要求 • 计算机科学、工程或信息管理(或等同专业)学士学位 • 5年以上相关工作经验 • 专业经验支持大数据平台应用和解决方案 • 具有各种大数据(Hadoop / Cloudera、Cloud等)的实际经验 • 掌握面向对象的脚本语言:Java(必需),Python(可选),等等。 • 有大数据、Hadoop、Spark、HDFS、Hive、HBase、Kafka、Impala、Spark和AWS、EMR的经验 • 精通SQL和关系数据库的经验 • 有UNIX shell脚本和命令的经验 • 有版本控制(git)、问题跟踪(jira)和代码审查的经验 • 熟练掌握敏捷开发实践 • 能够清晰地记录操作程序和解决方案设计 • 能够有效地沟通(口头和书面) • 能够在团队环境中进行合作 • 能够平衡竞争性的优先事项和期望 评论/特别说明 寻找在沟通、故障排除和客户支持方面表现出色,并对大数据平台运营感兴趣的人。有大数据开发背景会更加理想。