首席数据工程师
我们正在寻找一位首席数据工程师加入客户的技术团队,并为其集团架构委员会贡献力量,建设下一代电子商务数据平台。您将在设计和维护现代云端数据架构中扮演关键角色。与产品、技术和更广泛的业务利益相关者紧密合作,您将在开发可扩展的数据管道、提高可靠性以及实现更智能的数据驱动洞察和决策方面发挥重要作用。
您将在我们设计、构建和发展平台以及采用的技术方面拥有直接的话语权!
我们正在寻找一位务实、创新且自我激励的问题解决者,通过协作和技术卓越交付结果。
- 数据架构专家:设计和开发稳健的数据模型、ETL/ELT流程和支持复杂分析和操作用例的数据集市。
- 管道优化:维护和优化数据管道和仓库环境,以确保一流的性能、可靠性和可扩展性。
- 跨职能协作:有效地与跨职能团队合作,将业务和技术需求转化为高质量、稳健的数据解决方案。
- 数据质量管理:进行深入的数据分析以验证假设、识别问题,并全面负责数据质量、一致性和准确性。
- 最佳实践倡导者:自信地在现代云架构中推广数据工程、治理和平台可靠性的最佳实践。
您需要具备以下技能和经验:
- 云数据架构:对现代云端数据架构和工具(如S3、Glue、Redshift、Athena、Lake Formation、Iceberg/Delta)有深入了解。
- AWS平台构建:在AWS中设计和构建现代数据平台的可证明经验。
- ETL/编排专业知识:在ETL/ELT设计和数据编排方面的专业知识,特别是使用Apache Airflow。
- SQL精通:强大的SQL技能,具有显著的查询优化和性能优化经验。
- 编程能力:精通Python和Bash(用于数据处理、脚本编写和自动化)。
- 数据流技术:熟悉流数据技术(如Kinesis、Kafka或类似技术)。
- DevOps原则:具有版本控制(git)和数据管道CI/CD经验。
- BI/可视化:熟悉BI和可视化工具,如Tableau、QuickSight或类似工具。
- 数据治理工具:具有数据目录、元数据管理和数据沿袭工具的经验。
- 背景理解:对数据质量、治理以及数据背后的业务背景充满热情。
该职位位于伦敦,采用混合工作模式,每周需要在办公室工作2到3天。薪酬待遇提供高达£100k的工资,加上绩效奖金和全面的福利套餐。
伦敦(混合)
至£100k加奖金