基于双ResNet-50与交叉注意力融合的多模态受电弓燃弧检测方法

本发明涉及轨道交通弓网故障检测技术领域，具体涉及一种基于双ResNet‑50与交叉注意力融合的多模态受电弓燃弧检测方法；包括以下步骤：通过车顶刚性支架同步安装工业黑白相机与热像仪，依靠统一触发器同步触发成像，输出时空视场完全对齐的可见光黑白图与热成像图；将得到的对齐可见光黑白图、热成像图分别送入对应的残差分支中进行特征提取；融合两类图像的空间全局位置关联信息；选取全局信息最丰富的融合特征开展ViT全局编码增强；将全局增强特征送到YOLOv5网络中，得到多尺度聚合特征；将得到的多尺度聚合特征进行分类和目标检测；实现了能够有效规避光照、温度环境干扰，大幅降低误检漏检率、提升燃弧检测精度。