职位:高级数据工程师(GCP)
Coders Connect 正在与一家领先的国际游戏平台合作,通过数据创新改变数字娱乐世界。我们正在寻找一位高级数据工程师加入他们在迪拜不断壮大的团队。这是一个实操性强的职位,您将为他们的数据平台现代化做出贡献,并在促进分析、产品和工程功能的实时洞察方面发挥关键作用。
工作内容:
• 数据管道开发:
• 设计、构建和优化流式和批处理数据管道。
• 管理模式演变、数据合同和基于 dbt 的 ELT 工作流。
• 调整 Big Query 性能并优化资源使用。
• 架构与质量:
• 定义和倡导可扩展的数据存储和处理模式。
• 实施测试和监控框架以确保数据准确性。
• 执行数据治理标准并维护元数据沿袭。
• 自动化与运营:
• 使用 Terraform 部署基础设施即代码。
• 参与 CI/CD 工作流和事件响应流程。
• 在所有管道中保持高可用性和性能。
• 协作与指导:
• 与 BI、产品和平台团队密切合作,开发推动决策的数据模型。
• 为初级团队成员提供指导并分享最佳实践。
要求:
• 4 年以上数据工程或分析工程经验。
• 精通 SQL 和 Python。
• 具有使用 GCP 数据工具(Big Query、Dataflow、Pub/Sub)的经验。
• 具有 dbt 和 Airflow/Cloud Composer 的实际经验。
• 理解数据建模、增量加载和性能优化。
• 熟悉数据安全、IAM 和成本控制最佳实践。
优先经验:
• 接触过实时数据流和 CDC 工具。
• 具有 Data Vault 或湖仓架构经验。
• 拥有 Terraform 和 CI/CD 自动化的实际知识。
• 在游戏、金融科技或其他数据密集型行业有过经验。
成功标准 – 前 12 个月:
• 交付可靠的、生产就绪的管道,并有明确的 SLA 支持。
• 贡献新的 dbt 模型,具有完整的测试覆盖和文档。
• 改善工作负载的性能和成本指标。
• 与 BI、产品和合规团队建立牢固的合作关系。
福利:
• 具有竞争力的薪资。
• 混合工作模式,灵活平衡办公室协作和远程专注时间。
• 现代技术栈(GCP、dbt、Airflow、Terraform 等),提供实验和创新的机会。
• 协作的国际团队文化,结构扁平,具有自主权。
请注意:
候选人必须居住在迪拜才能接受此职位。
如果您准备好在塑造高影响力数据平台中担任领导角色,我们期待您的来信。
#J-18808-Ljbffr