关于这个角色
负责创建可靠的软件程序,以构建高可扩展性的数据管道,从不同来源收集大量数据,并将其转换为可供分析的可用格式。职责包括构建实时和批处理数据摄取管道,建立数据目录、数据仓库、数据清洗、数据转换、数据处理和数据可视化,以为企业提供实时智能。
角色与职责
• 构建、部署、测试和维护高可扩展且优化的数据管道,采用最先进的监控和日志记录实践。
• 开发软件程序或使用工具将大型、复杂和稀疏的数据集结合起来,以满足功能和非功能业务需求,并使用多种语言、工具和框架整合数据。
• 为分析和数据科学团队成员设计和实施数据工具,以帮助他们构建、优化和调优用例。
• 开发和管理数据仓库,以确保生产数据仓库的可用性、性能、可扩展性和安全性。
• 开发软件程序或使用工具来清洗和协调来自多种数据源的数据。
• 定义数据目录、元数据,以提供对结构化和非结构化数据的搜索能力和治理(包括记录管理)。
• 在指定领域实施数据管理的最佳实践,包括主数据、参考数据、元数据、数据质量和数据血缘。
成为不平凡故事的一部分
你的技能。你的想象。你的雄心。在这里,你的潜力和影响没有界限。你会发现无尽的机会来成长,解决最大的、最具回报的挑战,提升你的技能和经验。你有机会成为我们未来的一部分,构建你想要的生活,同时成为国际社区的一员。我们最好的时刻在这里,还有更多即将到来。对我们来说,不可能只是一个挑战。加入我们,共同实现前所未有的成就。一起,一切皆有可能。
资格要求
关于你
• 本科或相当学历,至少4年相关工作经验
• 在使用大数据技术(如Hadoop/Hive、Hyperscale PostgreSQL、Java/Scala、Spark、Kafka、SQL和NoSQL、以及Azure云基础数据工程解决方案)方面有实践经验
• 在数据摄取工具(例如:striim、streamsets、NiFi)方面有实际操作经验。
• 在数据建模、数据可视化以及管道设计与开发方面有实际操作经验。
• 在数据仓库平台(例如:Snowflake、Azure Data Lake Analytics)方面有实际操作经验。
• 具备对大型数据集的性能调优和查询优化的强大技术知识。
关于卡塔尔航空集团
我们的故事始于四架飞机。今天,我们在12个不同的业务中交付卓越,凝聚为一体。我们快速成长,打破记录,设定了其他人遵循的趋势。我们不会因为对失败的恐惧而放慢脚步。相反,我们敢于实现前所未有的成就。
所以,无论你是为我们的客户创造独特体验,还是在幕后进行创新,每个人都为我们骄傲的故事做出了贡献。这是一个壮丽增长和决心的故事。现在是将你最好想法和激情带到一个没有界限的地方的时刻,成为一个真正全球社区的一部分。
如何申请(外部)
如果你准备好加入一个进步的团队,并拥有一个具有挑战和回报的职业生涯,请现在申请,上传你的简历并完成我们的快速申请表。