CNIPA.AI
검색으로 돌아가기
기록

多模态数据融合方法、装置、计算机设备和存储介质

발명유효
1조회수
10청구항 · 5 독립항
§ Ⅰ

개요

발명자

王泽琨; 刘晴; 张园; 刘辉

IPC 분류

G06V 10/80 (2022.01)G06V 10/762 (2022.01)G06V 10/764 (2022.01)G06V 10/40 (2022.01)G06V 10/34 (2022.01)G06V 10/30 (2022.01)

本申请涉及一种多模态数据融合方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。所述方法包括:对来自至少两种模态的图像输入数据分别进行特征提取,得到每种模态的图像特征向量;基于每种模态的图像特征向量,生成对应每种模态的狄利克雷分布参数,并评估模态间的分布差异,所述狄利克雷分布参数用于表示分类或聚类任务中各类别的证据强度;根据所述分布差异,将每种模态的狄利克雷分布参数进行融合,得到融合后的基本概率分配结果;利用卡尔曼滤波器对所述基本概率分配结果进行动态调整,输出最终的分类或聚类结果。采用本方法能够动态调整各模态数据的融合权重,提升多模态融合系统的准确性和可靠性。