数据工程师(Python,Scala)

新加坡 5个月前全职 网络
5万 - 6.7万 / 月
您的新公司 一家公共公司正在寻找一位经验丰富的数据工程师加入他们的团队。 您的新角色 • 设计、构建和监控数据摄取管道,以收集、清理、合并和协调来自各种来源的数据,确保最佳性能和正常运行时间。 • 构建、测试和更新可重用的数据模型,同时为最终用户和系统设计安全机制,以访问数据仓库中的数据。 • 合作制定数据治理政策,维护数据目录,实施数据质量检查,并执行访问控制和加密等安全最佳实践。 • 研究和开发新技术和流程,以增强数据基础设施,确保在效率和可靠性方面的持续改进。 您需要成功的条件 • 在系统设计、数据结构、算法、数据建模、存储和访问方面具有扎实的基础,具备架构数据和IT系统的经验。 • 精通云平台(AWS,Azure,Google Cloud)、分布式数据技术(Spark,Hadoop)和编排框架(Airflow,Azure Data Factory)。 • 熟练掌握Python、Java、Scala、SQL,并熟悉CI/CD管道、DevOps工具(Docker、Git、Terraform)和基础设施自动化。 • 在批处理和实时数据管道、Databricks方面有经验,并实施安全、质量和治理流程,包括熟悉政府数据政策。 您将获得的回报 作为回报,您将成为一个重视员工的组织的一部分。您将获得: • 结构化的职业发展和丰富的成长机会 • 混合和稳定的工作环境 您现在需要做的 如果您对这个角色感兴趣,请点击“立即申请”或获取更多信息并进行保密讨论,关于这个角色或了解更多技术方面的机会,请联系Yuki Cheung或发送电子邮件至yuki.cheung@hays.com.sg。欢迎推荐。 在Hays,我们重视多样性,并热衷于将人们放置在能够茁壮成长和成功的角色中。我们积极鼓励来自不同背景的人申请。 EA注册号:R22110258 | EA许可证号:07C3924 | 公司注册号:200609504D