公司简介
我们是颠覆性技术的企业家,在Devoteam,我们为企业提供创新的技术咨询服务。作为数字转型的推动者,我们在欧洲、中东和非洲地区拥有7000多名专业人员,致力于确保我们的客户在数字战斗中取得胜利。我们通过改善业务绩效,使他们的公司真正实现数字化。我们为客户提供咨询,并构建数字化的IT基础设施,确保人们与时俱进。
Devoteam中东是该地区领先的咨询公司,提供创新的商业和技术咨询与解决方案。我们的存在已有14年,以技术为基础,使客户的业务蓬勃发展,因此我们的重点是帮助客户赢得数字战斗,根据客户的业务挑战进行调整,并独特考虑其对系统和结构的影响。
• *职位描述**:
您将负责扩展和优化我们的数据和数据管道架构,以及优化跨部门团队的数据流和收集。您是一位经验丰富的数据管道构建者和数据整理者,喜欢优化数据系统并从头开始构建它们。数据工程师将支持软件开发人员、数据库架构师、数据分析师和数据科学家在数据项目上的工作,并确保在进行中的项目中始终保持最佳的数据交付架构。
• *职责**
- 创建和维护最佳的数据管道架构,
- 组装满足功能/非功能业务需求的大型复杂数据集。
- 确定、设计和实施内部流程改进:自动化手动流程、优化数据交付、重新设计基础架构以实现更大的可扩展性等。
- 构建所需的基础架构,以实现从各种数据源中提取、转换和加载数据的最佳效果
- 构建利用数据管道提供有关客户获取、运营效率和其他关键业务绩效指标的可操作洞察的分析工具。
- 与高管、产品、数据和设计团队合作,解决与数据相关的技术问题,并支持他们的数据基础设施需求。
- 通过多个数据中心和地区,在国家边界上保持数据的分离和安全性。
- 确定改进数据可靠性、效率和质量的方法
- 确保数据可供正确方使用
- 确保数据管道符合数据治理实践
• *资格**:
- 在数据仓库和大数据项目方面有1-3年的经验。
- 具有高级的SQL知识,并具有与关系型数据库一起工作的经验,包括查询编写(SQL),以及对各种数据库的工作熟悉。
- 有构建和优化“大数据”数据管道的经验
- 具有处理非结构化数据集的强大分析能力。
- 构建支持数据转换、数据结构、元数据、依赖和工作负载管理的流程。
- 成功处理、处理和从大型断开的数据集中提取价值的历史记录。
- 熟悉消息队列、流处理和高度可扩展的“大数据”数据存储。
- 有大数据工具的经验:Hadoop、Spark、Kafka等
- 有关系型SQL和NoSQL数据库的经验
- 有面向对象/函数脚本语言的经验:Python、Java、Scala等
- 流利的英语和阿拉伯语能力