职位#1…具有Hadoop工具的Java架构师
地点:远程
注意:仅限永久居民和公民
该职位的重点是协助利用完整的NextGen OSS技术堆栈,包括Elasticsearch、Kubernetes、Kafka、StreamSets、Spark、Hadoop、Hive和使用Java开发的微服务。
工作时间和地点:
· 周一至周五,上午9:00至下午5:00,偶尔有升级事项。
· 主要是远程工作,每季度在纽约市中心和客户地点举行现场会议。
职位职责:
· 作为敏捷团队的一部分进行协作,参加每日站立会议和Sprint计划。
· 主动提出和解决问题。
· 使用报告工具监控和调整项目进展。
· 迅速处理临时信息请求。
主要技术技能:
· 具有高性能应用程序和稳健API设计的Java开发技能。
· 在软件生命周期方面具有全面的经验:从需求分析到部署。
· 高容量分析系统和数据管道的设计和部署技能。
· 熟练掌握Java Spring框架和并发访问管理。
· 熟练掌握Kafka和基于Hadoop的平台等大数据技术。
· 精通管理并发访问资源以避免竞争条件和数据不一致性。
· 熟练掌握Spark开发和优化。
· 具有使用Spark3 API和组件(如RDD、DataFrames和Datasets,以及SparkContext和SparkSession对象)的实际经验。
· 熟练设计适应应用程序特定需求的有效数据模型。包括选择适当的数据结构、关系和数据库模式。
次要技术技能:
· 在GitLab、Bitbucket等平台上的经验。
· 熟悉持续集成、持续交付和自动化。
· 了解事件驱动架构。
· 有Airflow等编排工具的经验。
· 熟练掌握Scala和Python等语言。
软技能和经验:
· 在IT系统集成商中具有面向客户的角色经验。
· 能够在高节奏的环境中高效运作,且能够自我监督。
· 能够激励团队,管理多项职责,具有较强的人际交往能力,包括谈判和协作能力。
· 使用版本控制系统进行团队协作。
工作类型:合同制
工资:每小时90.00美元至95.00美元
工作时间:
• 8小时轮班制
工作地点:远程