基于自适应注意力机制的多模态电力数据对齐方法及装置
本发明提供了一种基于自适应注意力机制的多模态电力数据对齐方法及装置,首先获取多模态巡检数据以提取运维特征和统计特征;接着对运维特征进行语义增强,得到增强特征;再根据统计特征,确定注意力权重向量;最终根据增强特征、注意力权重向量和双层交叉注意力机制,确定对齐特征;其中,双层交叉注意力机制包括用于完成设备级的全局语义对齐的粗粒度设备级交叉注意力层和用于完成组件级的局部语义对齐的细粒度组件级交叉注意力层;本发明通过设置双层交叉注意力机制,先完成不同模态数据对同一电力设备实体的全局语义锚定,确保所有模态数据的描述对象统一,再在全局对齐的基础上,实现对设备核心组件的局部语义精准匹配,从而提高数据对齐的准确度。