职位描述
角色概述：我们正在寻找一位高技能的高级数据工程师加入我们的团队，专注于关键数据产品的端到端生命周期和维护。此职位非常适合一位不仅精通Python编程且倡导严格测试和高质量软件标准的软件工程专家。您将负责维护可扩展的数据管道，通过自动化测试确保系统可靠性，并与技术团队合作提供稳定的数据解决方案。
主要职责：
ETL/ELT 优化：设计、构建和优化稳健的数据管道，确保其高效、可扩展且易于维护。
软件质量保证：通过实施全面的单元和集成测试框架来提高数据产品的可靠性。
自动化与监控：与跨职能团队合作，自动化部署工作流（CI/CD），并为数据工作负载建立主动监控/警报。
存储与性能：解决复杂的管道故障，优化数据存储结构，并解决性能瓶颈以确保系统的高可用性。
技术指导：将复杂的业务需求转化为可维护的技术设计，并为数据资产的长期架构稳定性做出贡献。
要求
教育背景：计算机科学、信息技术或相关技术学科的学士或硕士学位。
• 经验：至少8年的软件工程或数据工程专业经验。
• 编码：精通Python编程是严格要求。
• 测试：在生产环境中实施单元和集成测试的成功经验。
• 环境：对DevOps实践、CI/CD工具和敏捷/Scrum方法有深入了解。
• 分析能力：具备卓越的问题解决能力，专注于数据完整性和管道性能。
• 沟通能力：优秀的人际交往能力，能够在协作环境中有效地作为团队成员工作。
