数据平台工程师

迪拜 无个税6天前全职 网络
面议
公司简介 Avanza Solutions成立于2000年,是一家全球领先的公司,通过创新平台和服务帮助组织实现数字化转型。公司以其在数字银行、人工智能、区块链和智慧城市应用方面的专业知识而闻名,提供量身定制的尖端技术解决方案,以满足不同行业的独特需求。Avanza专注于自动化和以人为本的创新,已为银行、金融、电信、保险、制药和政府等行业提供了有影响力的解决方案。公司通过提升运营效率和推动数字化,持续在全球范围内重塑行业。 职位描述 这是一个全职职位,担任数据平台工程师,专注于Kafka、Airflow和Spark,工作地点在迪拜。数据平台工程师将负责设计、实施和维护数据平台,确保其效率、稳定性和可扩展性。主要职责包括使用Kafka和Airflow构建数据摄取管道,管理和优化Spark的分布式数据处理,解决基础设施和软件问题,并与跨职能团队合作进行技术集成。 资格要求 - 在数据平台和相关技术中具备强大的故障排除和问题识别能力 - 在软件开发和编程方面具有专业知识,尤其是在使用Spark和Kafka等大数据框架方面 - 具备基础设施管理经验,包括分布式系统 - 了解数据库和数据库管理系统 - 具备强大的分析能力、解决问题的能力和对细节的关注 - 拥有计算机科学、软件工程或相关领域的学士学位 - 具有分布式计算和大规模数据平台的经验者优先