CNIPA.AI
검색으로 돌아가기
기록

一种多模态数据融合的智能分类方法及系统

발명유효
10청구항 · 2 독립항
§ Ⅰ

개요

발명자

张晓莹; 陈少华; 张磊

IPC 분류

G06F 18/241 (2023.01)G06V 10/80 (2022.01)G06F 40/30 (2020.01)G06V 10/44 (2022.01)

本发明涉及数据处理技术领域,揭露了一种多模态数据融合的智能分类方法及系统,所述方法包括:对多个异构数据源的原始数据集进行标准化处理,得到原始数据集的预处理特征集;对预处理特征集进行多模态数据融合,得到预处理特征集的融合特征向量;根据融合特征向量中文本特征向量和图像特征向量的注意力权重,对融合特征向量进行加权求和,得到融合特征向量的上下文感知表示;确定上下文感知表示与预设类别中心的语义相似度,根据语义相似度,动态调整预处理特征集的分类阈值,生成预处理特征集的初步分类结果;对初步分类结果进行上下文一致性校验,得到预处理特征集的目标分类结果;本发明可以提高多模态数据融合的智能分类的准确率。