CNIPA.AI
Back to Search
Dossier

基于多模态分析的智能AI语义标注方法及系统

InventionActive
8Claims · 1 independent
§ Ⅰ

Dossier Overview

IPC Classification

G06F 18/214 (2023.01)G06F 18/25 (2023.01)G06F 18/2321 (2023.01)G06N 3/0455 (2023.01)G06N 3/0464 (2023.01)G06N 3/042 (2023.01)G06N 3/047 (2023.01)G06N 3/09 (2023.01)G06N 5/025 (2023.01)G06N 5/04 (2023.01)

本发明涉及人工智能领域,且公开了基于多模态分析的智能AI语义标注方法及系统,通过AI同步采集图像、音频、文本及传感器的多模态数据,经预处理后用深度学习模型提取各模态深层语义特征并生成向量,借助跨模态注意力机制融合成语义情景向量,构建跨模态关联图,以图神经网络学习因果逻辑路径;结合时空信息构建时空化因果图,用时序图神经网络整合事件时序与空间依赖形成脉络路径;再融合二者为综合知识图谱,经规则库推理生成初步标注,优化后输出高精度结果,能有效解决传统方法因模态割裂、上下文缺失导致的语义丢失与标注碎片化问题,同时降低人工校验成本,提升复杂场景下语义标注的完整性与效率。

External Resources