数据工程师/高级

新加坡 27天前全职 网络
面议
**关于我们** 关于SATS - 连接和服务社区** SATS是全球领先的门户服务提供商,也是亚洲卓越的食品解决方案供应商。我们利用创新的食品技术和强大的供应链,为航空公司、餐饮服务连锁店、零售商和机构以可持续的方式创造美味优质的食品。通过贴心的服务和先进的技术,我们为航空公司、邮轮公司、货运代理、邮政服务和电子商务公司等客户提供全面的门户服务,顺畅地连接人们、企业和社区。 • **主要职责** 本职位的目标** • **职责** - 与相关团队合作,定义功能和技术需求 - 为数据管道和相关系统编写技术规范、流程和工作流程文档 - 设计、开发和维护可扩展的数据管道,从各种来源摄取、处理和存储数据到运营数据平台 - 为业务用户设计和开发直观、高度自动化的自助数据平台功能 - 优化数据处理和存储基础设施,以支持关键任务、高容量、近实时和批处理数据管道 - 实施数据质量检查、监控和警报,以确保数据的准确性和可用性 - 参与代码审查、测试和部署过程,以保持高标准的数据工程实践 - 及时排除和解决数据管道问题,以尽量减少对业务运营的影响 - 为运营数据平台的整体数据架构和战略做出贡献 - 管理利益相关者的期望,确保清晰的沟通 LI-ST2 • **主要要求** 所需技能和资格** - 超过7年的数据工程经验,具备良好的Python、Java和SQL知识 - 拥有使用Spark等大数据框架进行大规模数据处理的实践经验 - 具备.Net、C#、HTML5、CSS、React和React JS的经验将是一个加分项 - 熟悉云计算平台,特别是Microsoft Azure数据工程工具和服务 - 拥有数据架构、数据湖和构建数据管道(包括数据收集、仓储、处理、分析、监控和治理)的经验 - 精通结构化和非结构化数据、数据库管理和转换方法 - 熟悉使用微服务、API、消息队列、流处理等进行技术集成 - 了解CI/CD管道、Azure DevOps或GitHub - 具备沟通技巧,能够向非技术利益相关者解释技术概念 • **优先技能和资格** - 计算机科学、信息技术、工程或相关学科的学士学位(或同等学历) - 拥有云技术和数据工程的认证 - 拥有航空领域知识将是一个加分项 LI-ST2 职位参考:SATS01668