一种基于多模态时空感知的多人跳绳智能检测方法

本申请涉及一种基于多模态时空感知的多人跳绳智能检测方法。所述方法包括：获取多模态跳绳数据并进行预处理，其中，所述多模态跳绳数据包括双摄像头数据和传感器数据；基于YOLOv8‑Pose构建姿态估计模型，包括可变形卷积层、时空注意力模块和关节轨迹补偿模块；将所述摄像头数据输入所述姿态估计模型，将输出结果与所述传感器数据采用分层动态时间规整算法进行时空特征融合，得到时空融合数据；联合脚踝垂直速度计算、IMU峰值检测、绳体角度分析和多条件联合决策对所述时空融合数据进行动作识别，得到多人跳绳检测结果。通过多模态时空对齐架构，通过传感器数据补偿视觉遮挡，提高了多人跳绳智能检测的准确率与精度。