中核勘察设计研究有限公司

本发明提供了一种基于物理模型驱动的多模态可控图像融合方法，涉及可控图像融合技术领域，包括：将相机响应特性、饱和像素分布、光晕扩散和局部纹理衰减转换为可见光退化表征权重图；生成红外结构有效性权重图；得到跨模态融合控制权重图；将重加权后的红外特征和可见光特征进行频率域分解，得到低频结构分量和高频纹理分量；执行动态跨模态注意力交互；生成单通道灰度融合图像；在训练阶段，利用所述跨模态融合控制权重图对正常区域和过曝退化区域施加区域差异化融合约束；本发明能够使融合图像有效抑制光晕伪影，同时保留红外关键目标结构与可见光有效纹理。