返回搜索
档案
大模型动态评测方法、系统、计算机设备和可读存储介质
发明专利有效
12权利要求 · 4 独立
§ Ⅰ
卷宗概要
发明人
赵君
IPC 分类
G06F 11/3668 (2025.01)G06F 11/34 (2006.01)
本申请涉及一种大模型动态评测方法、系统、计算机设备和可读存储介质。系统包括演化控制模块、测试用例生成模块、异常检测模块以及报告生成模块,其中:演化控制模块,用于在确定参数版本库中发生参数变更时生成目标采样策略,参数版本库用于维护评测参数,评测参数包括评测需求对应的参数;测试用例生成模块,用于基于目标采样策略生成测试用例;异常检测模块,用于将测试用例输入待测大模型,基于待测大模型的输出确定各项测试指标对应的指标数据,并基于各项测试指标对应的指标数据确定待测大模型的评测结果;报告生成模块,用于基于待测大模型的评测结果生成评测报告。采用本系统能够提高人工智能大模型的评测效率。