我们正在寻找一位经验丰富的AI应用测试工程师加入我们不断壮大的团队。您将专注于测试AI驱动的应用程序，包括对话式AI和基于RAG的系统，确保它们符合质量标准并在大规模下可靠运行。
主要职责
- 设计和执行AI/ML应用程序的测试用例，重点关注对话式AI和RAG架构
- 在开发、预发布和生产环境中进行AI应用程序的端到端测试
- 测试基于LLM的应用程序的准确性、一致性和适当响应
- 验证检索系统、向量搜索功能和文档摄取管道
- 对AI组件进行功能、回归和集成测试
- 识别和记录错误、边缘案例和模型行为问题
- 与跨职能团队合作，确保在AI开发生命周期中保持质量
- 为AI测试最佳实践和标准的发展做出贡献
必备技术技能
- AI/ML测试：3年以上AI应用程序、聊天机器人或基于RAG解决方案的实际测试经验
- Azure平台：具有Azure AI服务的丰富经验，包括Azure OpenAI、Azure ML、认知服务和Azure AI搜索
- 测试自动化：熟练使用自动化框架和工具（Selenium、Playwright、PyTest等）
- 编程：具备良好的Python编码技能用于测试自动化
- AI概念：了解LLM行为、提示测试和对话式AI模式
- API测试：具有测试REST API，特别是AI模型端点的经验
- 云测试：熟悉在Azure上测试云原生应用程序
- 版本控制：具有使用Git和协作开发工作流的经验
优先资格
- 具有Azure DevOps和CI/CD管道的经验
- 了解数据质量测试和验证技术
- 熟悉向量数据库（例如，Pinecone、Weaviate、Azure AI搜索）
- 了解AI模型评估指标
- 在使用Jira或类似工具的敏捷环境中的经验
- 接触过MLOps实践
Halian集团：
凭借超过28年的经验，我们深知创新是提供敏捷、实用解决方案以改变业务和职业的唯一途径。
我们的资源和智能服务帮助您实现明天的潜力。当您将合适的人才和合适的技术结合在一起时，发现可能实现的惊人事物。
在Halian，我们认识到多样性、公平性和包容性（DEI）对于为客户构建高绩效团队至关重要。我们致力于将组织与来自各个背景的顶尖人才连接起来，确保每个人都感到被重视、尊重，并有能力贡献他们独特的观点。我们鼓励所有合格候选人申请，无论种族、性别、残疾或任何其他使他们独特的特征如何。通过培育多样化和包容性的工作场所，我们帮助客户推动创新、增强协作，并更好地反映他们所服务的社区。
#LI-CC1
