职位描述
高级数据工程师 | 商品与能源交易 | 以 ClickHouse 为中心的数据平台 | 下一代湖仓 | Python, SQL | 最高 £89K + 奖金 + 福利
一家全球领先的能源与商品交易公司正在寻找一名高级数据工程师——这是世界上最大和最具多样性的综合贸易公司之一。该公司的交易生态系统涵盖多个商品和市场，创造了高容量、高速度的数据挑战，非常适合 ClickHouse 和现代数据工程。
角色概述 — ClickHouse 为核心
作为高级数据工程师，您将在构建和扩展以 ClickHouse 驱动的分析数据平台中发挥关键作用。您将成为核心工程团队的高级成员，负责塑造架构并实施直接由交易、风险、分析和运营团队使用的高性能数据解决方案。
这是一个动手的职位，您将指导一个小型工程师团队，同时设计和开发下一代湖仓架构。ClickHouse 将成为系统的支柱，支持超快速分析、市场数据摄取、逐笔数据存储以及为交易员和量化团队提供实时洞察。
您还将与 Databricks、Snowflake、Azure Synapse/Fabric 和 PySpark 等互补技术合作——但重点是充分挖掘 ClickHouse 在企业级数据生态系统中的性能和可扩展性。
您的工作内容包括：
• 设计、构建和优化 ClickHouse 集群，以支持商品和能源交易的大规模分析工作负载。
• 开发市场数据、定价数据、逐笔数据和交易/头寸数据集的摄取框架，利用 ClickHouse 的列存储和实时查询功能。
• 架构并维护一个现代湖仓平台，将 ClickHouse 与 Databricks、Snowflake 和 Azure 服务集成。
• 定义并执行针对 ClickHouse 的数据建模、分区、压缩和查询优化的最佳实践。
• 构建可扩展的基于 Python 的 ETL/ELT 管道和数据服务，为交易、风险和分析团队提供强大、低延迟的数据。
• 将 ClickHouse 与 BI 工具（如 Power BI 和 Tableau）集成，实现超快速的仪表板和近实时报告。
• 与核心工程负责人紧密合作，塑造长期数据战略和工程路线图。
关键技能与经验
• 拥有 ClickHouse 的强大商业经验（架构设计、集群配置、性能调优、摄取管道）。
• 对现代数据工程原则和湖仓架构有扎实的理解。
• 拥有强大的 Databricks 和 PySpark 经验。
• 精通 Python 和 SQL。
• 具备 Azure 和 DevOps/云原生工具的工作经验。
• 在数据编排、ETL/ELT 管道和数据建模方面有良好的背景。
• 熟悉将数据平台与 BI 工具（Power BI、Tableau）集成的经验。
• 在商品、能源或金融市场数据方面的经验将是极大的优势。
职位详情
• 薪资：每年最高 £89,000 + 奖金和福利
• 工作地点：伦敦（混合办公 — 每周 3 天现场工作）
如果您希望加入一家领先的全球交易公司，并掌握以 ClickHouse 驱动的下一代数据平台，成为一项全新工程计划的核心，我们期待您的来信。
