高级大数据开发者

16个月前全职
Citigroup

Citigroup

location 纽约
unsaved
作为一名大数据开发人员,这个人将成为我们充满活力的主要数据服务团队的一员,为大数据解决方案的开发和维护做出贡献。将与高级开发人员和团队负责人密切合作,在大数据领域学习和成长的同时,协助设计、编码和优化数据管道和应用程序。 • 设计、构建、安装、配置和支持Hadoop大数据。 + 与高级开发人员合作,使用Hadoop生态系统技术(如Hive、Flume、Yarn、Impala、S3、Flink、Spark、Kafka和NoSQL数据库)设计、开发和实施大数据解决方案。 + 掌握Scala、Java或Python等编程语言的强大编程能力。 + 为现有的大数据应用程序提供功能增强。 + 协助设计和编码数据管道,从各种来源提取、转换和加载数据到我们的数据生态系统,并实时处理数据并监控数据的错误或进展,以确保数据到达最终系统。 + 处理数据处理和分析任务,包括数据清洗、聚合和增强。 + 在有经验的开发人员的指导下,帮助优化和调整大数据应用程序的性能和可伸缩性。 + 参与代码审查并参与技术讨论,以保持代码质量并遵循最佳实践。 + 了解数据治理、数据质量和数据安全原则,并将其应用于工作中。 + 与大数据领域的新兴技术和趋势保持最新,为贡献新鲜的想法。 + 监控和控制开发过程的所有阶段,包括分析、设计、构建、测试和实施,并向业务用户提供应用程序的用户和运营支持 + 在业务使用后的实施分析中推荐和开发安全措施,以确保系统设计和功能的成功 + 能够在有限的直接监督下操作。 + 作为高级利益相关者和/或其他团队成员的主题专家 • 在Hadoop、Spark、HDFS、Impala、S3、Kafka、Flume、Yarn、Hive、Flink、Unix、autosys等方面具有3-5年的大数据开发实践经验。 + 在构建和实施端到端的大数据解决方案方面有丰富的经验,从数据摄取到数据处理和分析。 + 掌握Scala、Java或Python等编程语言的强大编程能力。 + 必须具备SQL和关系型数据库MSSQL或Oracle等的经验。 + 对大数据技术有浓厚的兴趣,并愿意在这个领域学习和成长。 + 具有软件应用程序的系统分析和编程经验 + 熟悉敏捷项目交付模型。 + 能够在压力下工作,并管理期限或期望或需求的突然变化 • 学士学位/大学学位或同等经验 + 应用程序开发 • 全职 • 合格的申请人将获得不受种族、肤色、宗教、性别、性取向、性别认同、国籍、残疾或作为受保护退伍军人的考虑。 如果您是残疾人士,并需要合理的便利设施来使用我们的搜索工具和/或申请职业机会,请查看**Accessibility at Citi (itigroup.com/citi/accessibility/application-accessibility.查看EEO政策声明(om/citi/diversity/assets/pdf/eeo_aa_policy.少数民族/女性/退伍军人/残疾人/性取向/性别认同