검색으로 돌아가기
기록
一种基于知识图谱的多模态检索方法及系统
발명유효
10청구항 · 2 독립항
§ Ⅰ
개요
발명자
郭建民; 秦建军; 刘远驰; 王文清; 梁华聪; 张明建; 潘新星; 黄国豪
IPC 분류
G06F 16/242 (2019.01)G06F 16/22 (2019.01)G06F 16/28 (2019.01)G06F 16/483 (2019.01)G06F 40/30 (2020.01)G06N 3/045 (2023.01)G06N 5/022 (2023.01)G06N 5/04 (2023.01)
本发明公开了一种基于知识图谱的多模态检索方法及系统,其特征在于,所述方法包括:识别多模态档案数据的实体信息以计算跨模态一致性分数;基于跨模态一致性分数构建语义锚点以生成知识事件;获取知识事件的若干次跨模态印证信息以对预设知识图谱进行结构优化,获得目标知识图谱;基于查询信息结合用户历史查询习惯确定查询意图,基于目标知识图谱提取语义扩展信息以对查询意图进行消歧处理;基于消歧处理后的查询意图利用目标知识图谱确定若干个检索结果,并分析消歧处理后的查询意图与各检索结果的语义路径;基于语义路径计算各检索结果的关联性得分以进行排序。本发明能够提供更具深度的检索结果,提高了检索结果的相关性和覆盖范围。