主要职责
• 开发和维护大规模数据管道和集成。
• 与跨职能团队合作,部署基于人工智能的解决方案。
• 确保数据质量、治理和系统可靠性。
• 关注人工智能和数据工程领域的新兴技术和趋势。
要求
• 3–5 年以上数据工程经验,专注于人工智能/机器学习管道、可扩展基础设施或生产环境中的数据产品。
• 计算机科学、数据科学、工程学或相关经验的学士学位。
• 在构建端到端的生产级管道方面取得成功,特别是针对人工智能/大型语言模型或机器学习工作流。
• 在人工智能/机器学习数据处理、向量化数据工作流和模型训练管道方面具有强大的实践经验。
• 有使用向量数据库、嵌入或基于图的数据基础设施的经验。
• 对数据生命周期管理、管道编排和基于云的基础设施有扎实的理解。
• 在快节奏的环境中展现出跨人工智能、工程和产品团队合作的能力。