我们正在寻找一位技术娴熟且经验丰富的数据工程师加入我们的数据工程团队,现场工作以支持阿联酋一家重要的航空公司客户。
职位:高级数据工程师 - AWS大数据平台
地点:阿联酋迪拜
薪资范围:每月12,500迪拉姆 - 13,500迪拉姆,根据经验和专业知识而定。
福利:阿联酋签证和工作许可证,年度机票,医疗保险,福利金,带薪休假。
主要职责:
• 设计和开发数据管道:创建高效处理和移动来自各种来源的数据的稳健数据管道。
• 数据仓库管理:构建和管理星型/维度数据建模数据仓库,确保满足业务需求并支持数据分析和报告需求。
• 技术实施:利用AWS云服务和大数据平台中的最新技术,增强我们的数据基础设施和能力。
• 数据处理:处理结构化和半结构化数据,实施确保数据质量和可访问性的流程。
• 协作:与其他团队成员、利益相关者和部门密切合作,了解数据需求并实施支持我们航空公司客户目标的解决方案。
技术栈:
• AWS云服务:熟练实施和管理EMR、Step Function、Lambda、Glue等服务。
• 大数据平台:具备Scala、Hadoop、Spark、Hive、Shell脚本、EMR、Step Function、Lambda、Glue、Sqoop等技术的经验。
• 数据库管理:熟悉Amazon Redshift、Oracle、SQL Server等数据库系统,并能够处理结构化和半结构化数据。
所需技能和资格:
• 计算机科学、工程或相关领域的学士学位。
• 5至8年的数据工程经验,具有开发和管理数据管道和数据仓库的成功经验。
• 精通大数据技术和工具,具备数据仓库设计和管理的坚实基础。
• 出色的分析能力,能够处理大型数据集,识别趋势并解决问题。
工作类型:全职
薪资:每月12,500迪拉姆 - 13,500迪拉姆
教育:
• 学士学位(必需)
经验:
• AWS云服务:3年(必需)
• Apache Spark:3年(必需)
• 数据工程:5年(必需)