大数据开发人员负责设计、开发和实施大规模数据处理系统。他们将与跨职能团队合作,了解业务需求,并将其转化为可扩展的数据解决方案。这个角色需要精通编程语言,如Python或Java,以及具备Hadoop、Spark和NoSQL数据库等大数据技术的经验。大数据开发人员还负责优化和故障排除数据流水线,确保数据的质量和完整性。
工作时间:周一至周五(上午8:30至下午6:00 / 上午9:00至下午6:30)
薪水:高达新加坡元每月12000元。
合同期限:12个月合同
工作地点:中部。
关于客户:
我们的客户是一家知名跨国公司
寻找大数据开发人员(12个月合同)
职责:
• 使用Spark和其他大数据框架开发企业级数据产品
• 对现有解决方案进行基准测试,确定差距,并提出解决方案以消除差距
• 能够与数据工程师、数据科学家、DevOps工程师、业务分析师、项目经理等团队成员合作,为提出的解决方案做出贡献
• 为所得到的数据产品提供运营支持和指导,包括监控、管理、灾难恢复、安全合规审计、网络、存储、服务代理和构建包
• 为数据产品及相关产品基础设施的部署建立和维护持续交付流水线
• 设计和实施持续集成和持续交付流程,将客户应用程序交付到生产环境,培养持续过程改进的文化
• 不断学习并保持行业趋势的领先地位
• 成为组织内的变革推动者。
技能/要求:
• 计算机工程或同等学位
• 必须具备分布式数据架构的实际经验
• 必须具备Spark的深入了解
• 必须具备Python的工作知识
• 必须具备CI/CD经验(Jenkins、GitHub)
• 必须具备Bash脚本的工作知识
• 对云服务和部署模型有清晰的理解。有AWS/GCP经验者优先考虑
• 具备Kubernetes或Docker经验者优先考虑
• 具备发布管理或生产运营经验,领导执行系统自动化和集成的团队(利用敏捷方法论/精益技术)
PERSOLKELLY Singapore Pte Ltd • RCB No. 200007268E • EA License No. 01C4394
R1331366(Pal Annie)