数据工程主管(Databricks),银行,伦敦,非IR35,远程
我们的投资银行客户正在寻找一位非常有经验的数据湖主管,该主管在银行业中基于Databricks构建和维护数据湖的经验有口皆碑,最好是在衍生品领域有相关经验。
请注意,您必须具备中/前台职位的投资银行经验,最好是在风险和衍生品领域。没有这方面经验的申请人将无法被考虑。
理想的候选人应具备扎实的Scala背景,特别是在Databricks中的工作经验。成功的候选人将加入我们的数据专业团队,负责设计、实施和维护平台和数据管道,以支持我们的财务报告需求。
该平台由前台技术人员使用,因此这对候选人来说是一个与前台交易员和量化交易员直接合作的激动人心的机会。
职责
• 设计和实施数据管道,以支持财务报告和前台分析需求。
• 设计和实施MLOps管道(MLFlow)。
• 在Databricks中开发和维护数据摄取和处理系统。
• 与业务利益相关者合作,了解他们的数据需求并提供适当的解决方案。
• 构建可扩展和高效的数据处理管道,以处理大量数据。
• 确保数据管道始终具有数据质量和一致性。
• 故障排除和优化数据管道的性能。
• 编写数据管道和流程文档,以确保知识传递和可维护性。
要求
• 计算机科学、信息系统或相关领域的学士或硕士学位。
• 至少5年的数据工程师经验。
• 必须具备良好的中台和前台业务知识,最好涵盖风险和衍生品。
• 在衍生品领域构建和维护数据管道的经验。
• 有Databricks的工作经验。
• 扎实的Scala和Python编程能力。
• 对数据库设计原理和数据建模有深入了解。
• 熟悉数据集成工具和技术。
• 具备敏捷方法和软件开发生命周期实践经验。
• 出色的问题解决和分析能力。
• 出色的书面和口头沟通能力。
我的客户非常支持远程工作,并偶尔需要前往他们位于伦敦市中心的办公室。
请发送您的简历以供立即考虑。