高级数据工程师 | 大宗商品与能源交易 | 以ClickHouse为核心的数据平台 | 下一代湖仓 | Python, SQL | 最高£89K + 奖金 + 福利
一家全球领先的能源与大宗商品交易公司需要一名高级数据工程师——这是世界上最大、最具多样性的一般贸易公司之一。他们的交易生态系统涵盖多种商品和市场，创造了高容量、高速度的数据挑战，非常适合ClickHouse和现代数据工程。
职位概述——以ClickHouse为核心
作为高级数据工程师，您将在构建和扩展以ClickHouse驱动的分析数据平台中发挥关键作用。您将成为核心工程团队的高级成员，塑造架构并实施直接由交易、风险、分析和运营团队使用的高性能数据解决方案。
这是一个实践性职位，您将在设计和开发下一代湖仓架构的同时指导一个小型工程师团队。ClickHouse将成为系统的骨干，支持超快速分析、市场数据摄取、逐笔数据存储以及为交易员和量化团队提供实时洞察。
您还将使用Databricks、Snowflake、Azure Synapse/Fabric和PySpark等互补技术，但重点是充分发挥ClickHouse在企业级数据生态系统中的性能和可扩展性。
您的职责
• 设计、构建和优化高性能ClickHouse集群，以应对大宗商品和能源交易中的大规模分析工作负载。
• 开发市场数据、定价数据、逐笔数据和交易/头寸数据集的摄取框架，利用ClickHouse的列式存储和实时查询。
• 构建并维护一个现代湖仓平台，将ClickHouse与Databricks、Snowflake和基于Azure的服务集成。
• 定义并执行针对ClickHouse的数据建模、分区、压缩和查询优化的最佳实践。
• 构建可扩展的基于Python的ETL/ELT管道和数据服务，为交易、风险和分析团队提供强大、低延迟的数据。
• 将ClickHouse与Power BI和Tableau等BI工具集成，实现超快速仪表盘和近实时报告。
• 与核心工程负责人密切合作，制定长期数据战略和工程路线图。
关键技能与经验
• 具备丰富的ClickHouse商业经验（模式设计、集群配置、性能调优、摄取管道）。
• 深刻理解现代数据工程原则和湖仓架构。
• 丰富的Databricks和PySpark经验。
• 精通Python和SQL。
• 具有Azure和DevOps/云原生工具的工作经验。
• 拥有数据编排、ETL/ELT管道和数据建模的背景。
• 熟悉将数据平台与BI工具（Power BI、Tableau）集成。
• 在大宗商品、能源或金融市场数据方面的经验是非常有利的。
职位详情
• 薪资：每年最高£89,000 + 奖金和福利
• 地点：伦敦（混合办公——每周3天现场）
如果您希望加入一家全球领先的贸易公司，并在一个以ClickHouse驱动的下一代数据平台中承担重要角色，我们期待您的联系。
高级数据工程师 | 大宗商品与能源交易 | 以ClickHouse为核心的数据平台 | 下一代湖仓 | Python, SQL | 最高£89K + 奖金 + 福利
