一种多模态融合的园区监控图像去雨方法及系统

本发明公布了一种多模态融合的园区监控图像去雨方法，包括：多模态雨图数据采集与预处理，采集降雨场景下的RGB图像、深度图像和红外图像，输出配准后的多模态图像；基于多模态特征提取网络，捕捉输入多模态雨图数据特征；基于雨水检测注意力模块，进行高精度雨水定位；基于多模态融合的门控机制，获取多模态融合特征；基于层次化的解码网络，生成高质量的去雨图像。本发明在去雨效果和计算效率上均有显著提升，特别适用于监控场景。