検索に戻る
案件記録
一种基于多模态特征融合的图片库构建方法及装置
発明有効
10請求項 · 4 独立
§ Ⅰ
案件概要
発明者
张川; 徐照兴; 吴琴琴; 刘巍; 周健; 裴育杰
IPC分類
G06V 40/10 (2022.01)G06V 40/50 (2022.01)G06V 10/74 (2022.01)G06V 10/764 (2022.01)G06V 10/80 (2022.01)G06V 10/82 (2022.01)G06N 3/0464 (2023.01)G06N 3/08 (2023.01)
本申请公开了一种基于多模态特征融合的图片库构建方法及装置,获取输入图片,并确定输入图片对应的拍摄时间及拍摄位置;将输入图片输入特征提取模型,以提取输入图片对应的人物身份特征和场景背景特征;将人物身份特征输入预设的人际关系模型进行解析,以确定人物身份特征对应的人际关系图谱;将人际关系图谱、拍摄时间、拍摄位置、人物身份特征和场景背景特征进行多模态特征融合,以生成输入图片对应的结构化描述信息;基于结构化描述信息,构建输入图片对应的本地图片库。实现了对图片内容深层次语义信息的结构化提取与多维度关联,有效提升了图片库的语义丰富度与检索效率。
外部リソース