一种交互式一体化图像恢复融合方法及装置

本发明公开了一种交互式一体化图像修复融合方法及装置，方法包括：构建基于多模态特征注入模块的交互式恢复融合模块，用于将红外模态的图像信息注入至一个预训练的潜在扩散模型为主干的网络中，以实现一体化的交互式多模态图像恢复与融合；构建融合图像结构修复模块，用于在潜在扩散模型的迭代去噪过程中，利用原始图像信息对恢复融合结果进行结构和细节的精炼。装置包括：处理器和处理器。本发明解决潜在空间融合导致的结构细节损失问题，从而生成信息更丰富、视觉质量更高的融合图像。