RGB-T目标跟踪方法及系统

本申请实施例公开RGB‑T目标跟踪方法及系统，涉及图像处理、模式识别的技术领域，所述方法包括：基于双流孪生网络分别对可见光图像和热红外图像进行特征提取，得到可见光模板特征、可见光搜索特征、热红外模板特征和热红外搜索特征；将上述特征进行融合得到多模态模板特征以及多模态搜索特征；基于所述多模态模板特征与所述多模态搜索特征，执行互注意力操作，并计算所述多模态模板特征与所述多模态搜索特征的互相关参数；将所述互相关特征输入角点预测网络和掩码预测网络，通过所述角点预测网络预测目标边界框的角点坐标，并通过所述掩码预测网络生成目标的二值分割掩码，结合所述角点坐标与所述二值分割掩码输出目标的精细化定位结果。