工作目的
在阿联酋航空集团,我们的分析卓越中心(ACoE)是一个集中化的部门,为阿联酋航空集团的业务提供数据和分析支持。这使我们的业务能够通过使用数据和分析来更好地理解我们的客户、运营和市场,从而做出更好的决策。ACoE 是阿联酋航空集团数字化转型战略的重要组成部分。该部门正在帮助阿联酋航空集团成为一个更加数据驱动的组织,并通过使用数据和分析来做出更好的决策。
高级数据工程师是一个跨职能团队的全职成员,能够自主工作于企业数据和分析领域的技术开发和问题解决。该角色涉及技术数据和分析解决方案及产品的设计、开发、测试、实施、支持和维护,以支持阿联酋航空和阿联酋航空集团的业务。
在这个角色中,您将:
- 在团队中领导小到中型解决方案的技术设计和构建。将功能性和非功能性数据及分析需求转化为合适的技术设计。在开发软件时,确保解决方案性能、业务边缘案例和安全相关问题得到解决。
- 调试复杂问题,解决阻碍因素,并在最少或无监督的情况下遵循设计文档。
- 在中等到高范围和复杂性的问题上完成数据工程编码任务。展示良好的编码原则。为同事进行代码审查。确保解决方案遵循已发布的数据隐私和网络安全原则。
- 以数据驱动的思维方式运作。帮助将数据和分析需求转化为基于批准的技术设计的数据解决方案。协助数据分析活动,如源系统分析、数据建模、数据字典收集、数据分析和源到目标映射,以确保解决方案满足业务需求。
- 处理多样范围的问题,其中数据分析需要评估可识别的因素。在选择获取解决方案的方法和技术时表现出良好的判断力。
- 在技术设计过程中与高级和首席数据工程师合作,通过分析数据应用、数据集成、大数据存储或数据管道需求做出贡献。
- 根据需要更新数据清单和注册表,以保持元数据和数据血统的最新状态,遵循商定的数据治理标准、指南和原则。
- 独立进行单元测试。排除故障,并修复中等到高复杂性的缺陷。
- 在设计和架构组件上跟随高级和首席数据工程师,并与跨职能团队成员合作以识别低效区域并提出解决方案。
- 遵循已发布的编码标准、指南和最佳实践,并为数据工程手册和其他数据技术蓝图做出贡献。
资格
要考虑此职位,您必须满足以下要求:
- 资格:计算机科学、计算数学、计算机工程或软件工程等相关领域的学位。
- 经验:2年以上分析应用程序(如数据湖和数据仓库)的开发、测试和支持经验。
知识与技能:
- 数据和分析领域的专业化或选修课(例如数据仓库、数据科学、商业智能)是一个加分项。
- 2年以上数据工程经验(硕士学位持有者的经验年限可适当放宽)。
- 至少2年以上分析应用程序(如数据湖和数据仓库)的开发、测试和支持经验(最好使用大数据堆栈和微软Azure云基础设施)。
- 批处理或实时数据摄取经验;具备处理大量数据(结构化和非结构化)管道编码经验,确保安全和及时。
- 理解数据架构概念,如数据建模、大数据存储、Lambda架构、数据仓库和维度建模是一个加分项。
- 理解与源系统的集成;能够使用数据集成工具将操作系统的数据加载到单一数据平台中。
- 具备调度可以高效监控的作业并确保数据质量的经验。
- 能够进行单元测试。
- 需要强大的SQL查询技能。
- 航空业经验是一个加分项。
- 优先具备强大的数据分析能力(例如源系统识别、数据字典/元数据收集、数据分析、源到目标映射)。
- 具有“你编写,你负责”的心态(即支持他们构建的产品)。
- 展示出解决问题的能力;能够独立设计和记录解决方案。
- 团队合作精神;能够与他人合作以消除障碍,解决复杂的设计问题并调试/解决问题。
- 能够迭代地交付解决方案(及相关价值)。
- 负责任并表现出积极的态度。
- 自我启动者,对探索和学习新技术充满热情,尤其是在企业数据和分析领域。
技术领域关键技术/工具:
- 大数据:Hadoop、Spark、Scala、Hive、H-Base、Sqoop、Oozie、Apache Nifi、Airflow、HDFS、ADLS(Gen 2)、Azure Data Factory(ADF)、DataBricks、Kafka、Elasticsearch、AVRO/PARQUET文件格式。
- 数据分析、建模和报告:Snowflake、SQL、Data Vault 2.0、MicroStrategy、Power BI。
- 云技术:微软Azure和Cloudera技术堆栈。
- 集成和消息传递:流处理(例如Spark Streaming)、SnapLogic、TIBCO、Kafka。
- CI/CD:GIT Bitbucket、Azure DevOps、Jenkins、JIRA、Confluence。
- 自动化:Java、Selenium、AppDynamics、HP Load Runner、Jmeter、Python、Automation Anywhere。
在阿联酋航空,我们致力于为员工提供成长和发展的机会。因此,如果您正在寻找一个具有挑战性和回报的机会,请立即申请并加入我们的团队!
薪资与福利
加入我们在迪拜的团队,享受具有吸引力的免税薪资和我们行业独有的旅行福利,包括全球航班和酒店住宿折扣。想了解在我们快节奏的国际化家乡城市生活和工作的感受,请访问我们网站的迪拜生活方式部分:www.emirates.com/careers