一种基于多模态融合的眼动追踪方法及系统

本发明公开了一种基于多模态融合的眼动追踪方法及系统，具体涉及眼动追踪技术领域，包括通过同步设置的RGB摄像头、红外摄像头及IMU采集用户面部图像、眼部图像和头部运动参数；并行处理这些信号，分别提取基于面部和眼部的视线方向向量及其可靠性度量，并解算头部空间姿态；根据可靠性度量动态选择高置信协作、主从补偿或冲突仲裁策略，融合生成初始视线方向；将该方向映射至显示平面获得初始注视坐标，并结合屏幕内容的视觉显著性分析进行优化校准，输出最终注视点坐标。系统包括信号采集处理、并行计算、多策略融合决策及输出优化模块。本发明通过多模态信息融合与动态策略选择，显著提升了眼动追踪的精度与鲁棒性。