岗位描述
一、岗位职责:
1、负责LLM、Agent、AI应用等全流程测试工作,覆盖功能测试、场景测试、回归测试、安全性测试,保障AI产品功能稳定性、可用性与准确性。
2、独立完成各类高质量提示词的编写、优化与迭代,针对大模型对话、问答、推理、工具调用、多轮交互等场景设计专属提示词,提升模型输出效果,适配业务落地需求。
3、负责AI智能体Agent核心能力测试,包括任务规划、工具调用、记忆能力、多轮对话、逻辑推理、异常场景适配等核心功能,梳理Agent运行链路的测试要点与风险点。
4、熟悉AIOT平台整体架构与业务流程,负责AIOT平台关联AI模块的测试工作,联动硬件、平台数据、App面板交互等场景,完成端到端全流程测试。
5、借助AI工具(如cursor、copilot,claude等)辅助生成测试用例、测试脚本、测试报告,提升测试效率。
6、梳理AI产品测试流程与规范,输出测试计划、测试用例、测试报告、缺陷分析等文档,跟进问题闭环,持续优化测试体系。
任职要求
1、本科及以上学历,1-3年AI/AIOT相关测试工作经验,熟悉软件测试完整流程与方法论。
2、熟悉AIOT平台业务逻辑与运行流程,了解物联网、AI平台联动机制,具备AI+IoT场景融合测试经验者优先。
3、具备扎实的Python编程基础,可独立编写测试脚本、自动化测试代码,能够自主开发、调试AI平台自定义Skill功能。
4、熟练掌握主流测试工具,熟悉AI模型测评工具、接口测试工具、自动化测试工具,能够独立搭建测试环境、设计测试方案。
5、熟悉大模型常见问题(幻觉、上下文丢失、逻辑错误、指令不遵循、工具调用异常等),具备丰富的AI场景边界测试、异常测试经验。
6、具备良好的逻辑思维、问题排查能力和文档撰写能力,工作细致严谨,有较强的业务理解能力和跨团队沟通协作能力。
7、有Agent智能体、大模型应用、AI技能开发、AIOT平台项目实战经验者优先。