关于该职位
作为高级数据工程师,您将专注于设计、构建和维护可扩展的数据解决方案,以支持业务需求和人工智能应用。您将发挥关键作用于:
• 数据管道与架构开发
• 构建和优化自动化数据管道,以便摄取、转换和处理大型数据集。
• 设计高效的数据架构,以支持分析、机器学习和实时应用。
• 云迁移与人工智能赋能
• 支持云迁移工作,将本地数据工作流转移到基于云的平台,如 Databricks。
• 与数据科学家合作,改进特征选择、特征工程,并实现从模型训练到部署和监控的端到端人工智能工作流。
• CI/CD 与自动化
• 开发 CI/CD 管道,以简化数据管道的部署,并确保稳定的自动化工作流。
• 改进监控和可观察性,以维护系统的可靠性。
• 合作与业务影响
• 与数据科学家、产品团队和平台工程师合作,使数据解决方案与业务目标保持一致。
• 确保数据质量、安全性及符合行业标准。
• 贡献数据治理、文档和自动化的最佳实践。
资格与技能
• 信息技术、数学或统计学学位,至少 3 年数据工程经验。
• 精通 Python、Java、SQL、Linux Shell。
• 在 UNIX 环境、Git Flow、CI/CD 自动化、Jenkins、Bitbucket 方面有经验。
• 有使用 Spark、Hadoop 平台和工具(Hive、Impala、Airflow、NiFi)、Spring Boot 等构建大数据产品和平台的实践经验。
• 精通现代云或混合云技术栈(AWS、Databricks、Cloudera 等)。
• 有构建和部署生产级数据驱动应用程序和数据处理工作流或管道的经验。
有意者请将简历和求职信直接发送至 gem.cabria@manpower.com.sg (R1434374),并在邮件主题中注明职位名称。
Jireli Gem Mejia Cabria EA 许可证编号:02C3423 人员注册编号:R1434374
请注意,您对本广告的回应及与我们基于本广告的通信将构成您对新加坡人力资源集团收集、使用和/或披露个人数据的知情同意,以便开展其业务,符合 2012 年个人数据保护法的相关规定。如需了解更多关于人力资源集团全球隐私政策的信息,请访问 https://www.manpower.com.sg/privacy-policy