검색으로 돌아가기
기록
一种指令数据质量评估方法、装置、设备和存储介质
발명유효
10청구항 · 4 독립항
§ Ⅰ
개요
발명자
玄慧君; 蔺艳斐; 孙学宁; 陈目凯; 刘笑; 郑晓莉; 刘聪; 李雪玉; 罗沐奇; 刘恩晓; 王印轩
IPC 분류
G06F 40/30 (2020.01)G06F 18/22 (2023.01)G06N 3/045 (2023.01)G06N 5/04 (2023.01)G06F 16/35 (2025.01)G06N 3/047 (2023.01)G06N 3/096 (2023.01)G06N 3/084 (2023.01)G06N 3/042 (2023.01)
本发明实施例公开了一种指令数据质量评估方法、装置、设备和存储介质,其中,方法包括:获取至少一条待评估指令;其中,每条待评估指令中包含一个目标问题和与目标问题对应的目标答案;针对每条待评估指令,将待评估指令中的目标问题分别输入至多种通用大模型中,得到目标问题对应的多个参考答案,基于多个参考答案之间的语义分布程度确定目标问题的问题评估结果;基于多个参考答案和目标答案之间的语义分布程度确定目标答案的答案评估结果,并基于问题评估结果和答案评估结果确定待评估指令对应的指令质量评估结果。本发明实施例的技术方案可以实现整体指令数据的质量评估,提高指令数据评估的效率和可靠性。