锦鲤求职岗位描述
工作职责
1、负责AI大模型及相关应用的评测工作，深入理解评测需求，制定并落地评测方案；
2、对AI大模型及应用进行功能、性能、稳定性评测等，确保系统满足用户需求；
3、负责线上AIGC的内容质量的监测和评价工作，为运营、内容提供评测数据与结论支持；
4、分析归因评测结果，编写评测报告，提出改进建议，协助研发团队定位并修复问题；
5、跟进智能化评测能力的持续迭代和提升，通过在应用场景上不断探索和创新，保质提效。
工作要求
1、计算机、软件工程、自动化、通信类等相关专业2027年应届毕业生，硕士及以上学历；
2、熟悉Java/Python/C++等至少一种编程语言；
3、了解大模型基本原理，熟悉主流评测基准和评测框架，有Agent评测、数据集构建实践者优先；
4、掌握软件测试设计方法，理解软件编程规范和软件缺陷，了解软件自动化测试方案和测试方法；
5、对AI领域有浓厚兴趣，有AI产品的使用与分析经验（券商类优先），能从用户视角发现问题。
符合《证券基金经营机构董事、监事、高级管理人员及从业人员监督管理办法》等监管办法规定的执业条件。