검색으로 돌아가기
기록
视觉语言模型幻觉减轻方法、设备和存储介质
발명유효
3조회수
10청구항 · 3 독립항
§ Ⅰ
개요
발명자
程栩悠
IPC 분류
G06F 16/335 (2019.01)G06F 16/583 (2019.01)G06F 18/214 (2023.01)G06N 5/04 (2023.01)
本发明涉及人工智能领域,公开了一种视觉语言模型幻觉减轻方法、设备和存储介质,该方法包括:获取一个待微调领域数据集,根据待微调视觉语言模型,确定待微调领域数据集中每个提示词图像对对应的至少两个候选答案;对每一个候选答案进行二元问题拆分,得到至少一个目标二元问题;检测每个提示词图像对中的图像,确定每个目标二元问题的事实性评分;对每一个候选答案,聚合候选答案对应的各目标二元问题的事实性评分,得到每一个候选答案的综合评分;根据每一个候选答案的综合评分,构建偏好数据集;使用偏好数据集对待微调视觉语言模型进行训练,得到已微调视觉语言模型。本发明能够实现高效且显著的抑制模型幻觉问题的效果。