数据工程师(Python,Kafka,Spark)75k +福利。伦敦办公3天。
我们正在与一家领先的娱乐机构合作,在伦敦的动态数据团队中寻找一名数据工程师加入他们。
该职位将向数据主管汇报,最初专注于一项创新的数字平台。
该职位将负责构建和发展关键的数据服务,如洞察力、身份解析和受众建模。
这是一个绝佳的机会,利用和发展您的技术专长,与公司内非常成功的项目合作,并交付突破性和创新的数据产品。
职责:
• 构建和发展组织中使用的关键数据平台、服务和管道
• 负责开发流式系统和大数据管理
• 负责提供产生实际业务价值的数据服务
• 维护现有的管道和流程,如各种类型的Airflow DAG,确保持续的数据传递
所需技能:
理想的候选人应积极主动,愿意开发和实施创新解决方案,具备以下能力:
推荐:
• 熟练掌握一种编程语言(Python,Java等)
• 熟练掌握云服务(最好是AWS)
• 大规模流式数据(例如Apache Kafka)
• 具备低延迟时间序列数据库的经验(例如Apache Druid)
• 理解构建和部署高可用、分布式数据提取、转换和加载数据集的系统
• 监控数据可靠性和基础设施性能
• 熟悉持续交付和持续集成(Jenkins,Docker,K8s)
• 理解敏捷方法和持续交付
加分项:
• Databricks/Apache Spark
• AWS/Azure/GCP认证
• 基础设施即代码(例如Terraform)
• 能够调试分布式架构
请发送您的简历以供立即考虑。