AI智能体评测高级产品经理

岗位职责
1. 统筹汽车垂类AI对话App全链路智能体效果评测体系，搭建Agent标准化评测框架和自动化机评流水线及平台
2. 负责智能体全生命周期效果监控，驱动Agent核心能力持续优化，对智能体自动化评测覆盖率、人机打分一致率、业务问题闭环效果全权负责。
3. 面向看车/选车/买车/用车业务场景，负责评测数据集与行业基准建设，设计分层评测体系及场景化评测用例，定义多维度评测指标体系
4. 联动算法研发、数据标注及产品运营团队，打通「评测→根因分析→方案修复→复测验证」完整优化闭环，指引智能体迭代方向，提升用户全场景问答体验
5. 建立覆盖智能体需求开发、版本测试、线上灰度、线上数据回流全生命周期的质量管控标准，将评测准入规则嵌入产品迭代流程

岗位要求
任职要求：
1. 统招本科及以上学历，计算机、人工智能、NLP、数据科学等相关专业优先
2. 3年以上用户产品经验，熟悉主流评测框架，有大模型/AI Agent产品完整评测实操经验及自动化评测落地经验
3. 有汽车行业项目背景优先，熟悉用户看车、选车、买车、用车真实业务场景，能结合C端用户需求设计贴合业务的评测方案
4. 熟悉对话策略，理解大模型技术原理，包括多工具调用、多轮记忆、复杂链式任务规划，能精准识别汽车选购等长链路场景下的评测难点
5. 具备优秀数据分析能力，持续自驱迭代，条理清晰，思维严谨，推动力强