一种多模态检测知识图谱构建方法

本发明公开了一种多模态检测知识图谱构建方法、装置、电子设备及存储介质，属于人工智能技术领域。该方法包括：获取包括图像数据和文本数据的多模态检测数据；采用深度卷积神经网络处理所述图像数据，提取图像实体信息；对所述文本数据进行自然语言处理，提取文本实体信息及实体间的关系信息；融合所述图像实体信息、文本实体信息及关系信息，构建知识图谱三元组。本发明能够将图像中的视觉信息与文本中的语义信息进行有效融合，自动化地构建出信息维度丰富、结构完整的多模态检测知识图谱，显著提升了知识获取的全面性和准确性，解决了现有技术信息维度单一、实体关系不完整的问题。