我们正在寻找一位经验丰富的AI应用测试工程师加入我们不断壮大的团队。您将专注于测试AI驱动的应用程序,包括会话AI和基于RAG的系统,确保它们符合质量标准并在大规模下可靠运行。
主要职责
- 为AI/ML应用设计和执行测试用例,重点关注会话AI和RAG架构
- 在开发、预发布和生产环境中进行AI应用的端到端测试
- 测试基于LLM的应用程序的准确性、一致性和适当响应
- 验证检索系统、向量搜索功能和文档摄取管道
- 对AI组件进行功能、回归和集成测试
- 识别并记录错误、边缘案例和模型行为问题
- 与跨职能团队合作,确保整个AI开发生命周期的质量
- 为AI测试最佳实践和标准的发展做出贡献
所需技术技能
- AI/ML测试:3年以上AI应用、聊天机器人或基于RAG解决方案的实际测试经验
- Azure平台:具有Azure AI服务的丰富经验,包括Azure OpenAI、Azure ML、认知服务和Azure AI搜索
- 测试自动化:熟练使用自动化框架和工具(Selenium、Playwright、PyTest等)
- 编程:具备良好的Python编程技能用于测试自动化
- AI概念:理解LLM行为、提示测试和会话AI模式
- API测试:有测试REST API的经验,特别是AI模型端点
- 云测试:熟悉在Azure上测试云原生应用
- 版本控制:有使用Git和协作开发工作流的经验
优先资格
- 有Azure DevOps和CI/CD管道的经验
- 了解数据质量测试和验证技术
- 熟悉向量数据库(例如,Pinecone、Weaviate、Azure AI搜索)
- 理解AI模型评估指标
- 在使用Jira或类似工具的敏捷环境中有经验
- 接触过MLOps实践
Halian集团:
拥有超过28年的经验,我们已经了解到,创新是提供敏捷、实用解决方案以改变企业和职业的唯一途径。
我们的资源和智能服务帮助您实现明天的潜力。当您将合适的人才和合适的技术结合在一起时,发现可能实现的惊人事物。
在Halian,我们认识到多样性、公平性和包容性(DEI)对于为我们的客户建立高绩效团队至关重要。我们致力于将组织与来自各种背景的顶尖人才联系起来,确保每个人都感到被重视、尊重,并有能力贡献他们独特的观点。我们鼓励所有合格候选人申请,无论种族、性别、残疾或任何其他使他们独特的特征。通过促进多样化和包容性的工作场所,我们帮助客户推动创新、增强协作,并更好地反映他们所服务的社区。
#LI-CC1