我们正在寻找一位有经验的AI应用测试工程师加入我们不断壮大的团队。您将专注于测试AI驱动的应用程序,包括对话式AI和基于RAG的系统,确保它们符合质量标准并在大规模下可靠运行。
主要职责
• 为AI/ML应用设计和执行测试用例,重点关注对话式AI和RAG架构
• 在开发、预发布和生产环境中进行AI应用的端到端测试
• 测试基于LLM的应用程序的准确性、一致性和适当响应
• 验证检索系统、向量搜索功能和文档摄取管道
• 对AI组件进行功能、回归和集成测试
• 识别并记录错误、边界情况和模型行为问题
• 与跨职能团队合作,确保在AI开发生命周期中的质量
• 为AI测试最佳实践和标准的发展做出贡献
必需的技术技能
• AI/ML测试:3年以上AI应用、聊天机器人或基于RAG解决方案的实际测试经验
• Azure平台:具有Azure AI服务的丰富经验,包括Azure OpenAI、Azure ML、认知服务和Azure AI搜索
• 测试自动化:熟练掌握自动化框架和工具(Selenium、Playwright、PyTest等)
• 编程:具备良好的Python编码技能用于测试自动化
• AI概念:理解LLM行为、提示测试和对话式AI模式
• API测试:有测试REST API的经验,特别是AI模型端点
• 云测试:熟悉在Azure上测试云原生应用
• 版本控制:有使用Git和协作开发工作流程的经验
优先资格
• 有Azure DevOps和CI/CD管道的经验
• 了解数据质量测试和验证技术
• 熟悉向量数据库(例如,Pinecone、Weaviate、Azure AI搜索)
• 理解AI模型评估指标
• 在使用Jira或类似工具的敏捷环境中的经验
• 接触过MLOps实践
Halian集团:
凭借超过28年的经验,我们已经了解到,创新是提供灵活、实用的解决方案以改变业务和职业的唯一途径。
我们的资源和智能服务帮助您实现明天的潜力。当您将合适的人才和合适的技术结合在一起时,发现可能实现的惊人事物。
在Halian,我们认识到多样性、公平性和包容性(DEI)对于为我们的客户建立高绩效团队至关重要。我们致力于将组织与来自各种背景的顶尖人才连接起来,确保每个人都感到被重视、尊重,并有能力贡献他们独特的观点。我们鼓励所有合格候选人申请,无论种族、性别、残疾或任何其他使他们独特的特征。通过培养多元化和包容性的工作场所,我们帮助客户推动创新、增强协作,并更好地反映他们所服务的社区。
#LI-CC1