高级云数据工程师

无个税14个月前全职
Hollard Insurance

Hollard Insurance

location 利雅得
unsaved
霍拉德保险公司的职位空缺,职业和招聘 职位名称:高登夫的高级云数据工程师职位地点:高登夫,约翰内斯堡截止日期:2024年2月16日快速推荐链接 •按地点分类的工作 •按行业分类的工作 所需知识和经验 您的职责和责任 •向数据工程师实践经理汇报,您的重点关注领域将包括: •您将需要设计、构建并支持在Azure数据平台上交付现代数据工程解决方案,与霍拉德内部的跨职能团队密切合作,包括基础架构DevOps团队、解决方案架构师、专业人员、数据建模师等。 这种合作旨在确保霍拉德的数据平台生态系统在支持业务需求方面是最佳的。此外,您还将与供应商合作,确保数据工程交付和实践符合霍拉德的标准。 您的职责包括: •维护、支持和监控现有的生产Azure Synapse数据工程管道、PySpark笔记本、数据平台湖屋架构和Azure SQL ODS存储和存储过程、CICD管道,以确保数据平台上的所有数据加载符合数据质量标准和业务SLA要求。 •参与和贡献Azure数据平台架构设计、数据建模、数据需求收集和分析;理解、记录、沟通和构建适当的解决方案。 •参与、设计、构建、交付和记录最新的Azure数据分析技术相关的数据平台项目。 •通过CICD YAML管道和自动化推广数据工程最佳实践。 •指导和辅导初级数据工程师使用Azure技术。 •获得的知识意识、技能和/或专业知识 •在数据仓库、BI分析和/或ML领域设计、构建和支持数据工程管道的10+年可证明经验,其中包括使用Azure数据分析工具(如Data Factory、Synapse、Azure SQL、数据湖Gen2、密钥保管库)的5+年工作经验。 •在Azure Data Lake Gen2和Apache Spark上使用PySpark实施现代湖屋架构的强大知识和丰富经验。 •在元数据驱动的数据工程管道设计和开发方面具有强大的知识和经验,以实现可重用的模式和框架。 •在维度和/或数据仓库方法论方面具有强大的数据建模知识和实施经验。 •在敏捷框架中具有强大的知识和丰富的经验,使用现代DevOps/数据运营集成流程和YAML管道进行持续集成/持续交付。 •具备机器学习、MLOps、AI方面的知识是可取的。 •具备BICEP和/或Terraform等基础设施即代码的知识是可取的。 •处理半结构化数据(XML、JSON)的经验 •行为能力个人素质 •具备可用性和参与度,灵活且足智多谋,具有积极进取的态度。 •对技术和分析具有持续学习的热情和好奇心 •优秀的沟通者、合作者和人际交往能力,能够迅速建立融洽关系。 •在压力下能够有效管理具有挑战性的情况,不失焦点。 •在交付实质性结果的同时,能够适应不确定性并愿意走出舒适区。 教育要求 •计算机/数据科学技术或相关领域的学士或硕士学位是必须的。研究生学历非常受重视。 •微软Azure数据工程师认证(DP-203)。 •南非ICT工作*约翰内斯堡的高级云数据工程师