模型评估方法及电子设备

本发明实施例提供了一种模型评估方法及电子设备，涉及大语言模型技术领域。方法包括：获取对应N个原始问题的N组问题数据，N≥1，每组问题数据包括：对应多种问题类型的参考问题、各所述参考问题被输入到待评估模型后所得到的模型回答以及标准答案；非原始类型的每种所述问题类型的参考问题为由所述原始问题按照所述问题类型变换得到；对于每种所述问题类型，基于所述问题类型下的所有所述参考问题的模型回答分别与所属所述问题数据内的所述标准答案的对比，得到表征待评估模型对应所述问题类型的答复质量的质量指标值；基于各所述问题类型对应的所述质量指标值，确定待评估模型的性能指标参数。