AI 产品测试工程师

岗位职责
1.负责 AI Agent 系统的全链路测试，覆盖多步推理、工具调用（Function Calling）、记忆管理、多 Agent 协作等核心能力的功能验证与回归测试。
2. 设计并执行检索增强生成（RAG）系统的评测方案，包括召回准确率、生成质量、幻觉率、知识库更新一致性等维度的测试。建立 Agent 任务完成率、工具调用成功率、响应质量等评估指标体系，构建自动化评测流水线，驱动产品持续迭代。
3.负责大模型推理服务（vLLM / TGI / TensorRT-LLM 等）的功能测试、接口测试和稳定性测试，验证多模型路由、负载均衡、Token 用量管控等核心逻辑。针对推理服务进行并发压测与性能基准测试（延迟、吞吐量、GPU 利用率），识别瓶颈并输出优化建议。建立模型版本更新后的效果回归测试机制，确保量化、蒸馏等压缩操作不引入质量退化。
4.负责 AI 产品前端界面的功能测试、多端多浏览器兼容性测试和用户体验测试，确保交互体验的一致性和流畅度。搭建前端自动化测试框架（Playwright / Cypress / Selenium），编写 E2E 测试用例和 API 接口测试，持续提升自动化覆盖率。建立缺陷跟踪与分析机制，参与 Code Review 与技术方案评审，从测试视角提前识别风险，推动开发团队持续改进代码质量。

任职要求
1.计算机科学、软件工程或相关专业本科及以上学历，3 年以上软件测试经验，其中至少 1 年 AI 应用或大模型产品的测试经验。
2.理解大模型基本原理（Prompt、Temperature、Token 等），能够设计针对生成式 AI 的测试用例；具有 Agent 工作流、RAG 系统的实际测试经验。
3.熟悉 HTML、CSS、JavaScript 基础知识，能够阅读和理解前端代码；具有前端功能测试、兼容性测试和用户体验测试的丰富经验。熟练掌握 Playwright、Cypress 或 Selenium 中的至少一种，具备 E2E 自动化测试用例的设计与开发能力；熟悉 API 测试工具（Postman、Pytest、HttpRunner）。
4.有性能测试经验，熟悉 JMeter、Locust、k6 等性能测试工具。能够对前后端系统进行压力测试并输出分析报告。熟悉 Linux 环境，掌握 Git 版本管理，了解 CI/CD 流程，能够独立搭建和维护测试环境。
5.具有以下工作经验者优先考虑：熟悉 Python，能编写测试脚本和自动化评测工具。了解大模型推理服务的部署架构（vLLM、TGI 等），能配合推理团队进行端到端的性能压测。有模型量化、蒸馏等压缩操作的效果回归测试经验。有安全测试（Prompt 注入、数据泄漏防护等）经验。有测试平台或测试框架从 0 到 1 搭建经验。了解 Docker、Kubernetes 容器化部署，能够独立搭建测试环境。