一种基于双驱动多模态融合网络的遥感图像目标检测方法、系统及程序产品

本发明属于多模态目标检测领域，涉及一种基于双驱动多模态融合网络的遥感图像目标检测方法，该方法通过构建“图像融合‑目标检测”联合优化框架，解决现有多模态融合方法仅关注低层次视觉质量、与高层检测任务需求错位，导致融合结果无法有效提升遥感图像目标检测精度的技术问题，充分释放多模态数据在复杂遥感场景中的应用潜力。本发明提出了一种新型遥感图像检测驱动的多模态融合框架，与现有方法中融合质量常与检测性能不匹配的问题不同，本框架通过联合优化底层图像融合与高层目标检测任务，实现了二者的有效协同。该网络从可见光Y通道的相位谱中提取高频结构特征，并与红外通道进行融合，确保了结构特征与颜色特征的互补性融合。