基于红外模态特权信息的无人机目标检测方法与系统

本发明公开了一种基于红外模态特权信息的无人机目标检测方法与系统。该方法通过在训练阶段利用像素级对齐的RGB图像和红外图像训练，并构建一个多尺度红外特征码本；在推理阶段，通过输入RGB图像即可获取相应的不同尺度的预测码本索引；并利用不同尺度的预测码本索引重构多尺度红外特征图，再与多尺度RGB特征图进行融合，以生成包含双模态信息的多尺度融合特征图，最后输入检测头进行分类回归任务，得到检测结果。本发明在推理阶段，仅需输入RGB图像即可完成无人机目标检测，实现了在无红外输入条件下的高精度无人机检测，有效降低部署成本并提高检测鲁棒性。