検索に戻る
案件記録
基于掩码自监督学习的IMU人体动作识别方法
発明有効
10請求項 · 4 独立
§ Ⅰ
案件概要
発明者
徐枫; 杜婉晴
IPC分類
G06F 18/241 (2023.01)G06F 18/2431 (2023.01)G06F 18/214 (2023.01)G06F 18/25 (2023.01)G06N 3/0455 (2023.01)G06N 3/0464 (2023.01)G06N 3/088 (2023.01)G06N 3/096 (2023.01)
本发明提出一种基于掩码自监督学习的IMU人体动作识别方法及装置,涉及人体动作识别技术领域,其中,方法包括通过IMU传感器获取加速度与姿态方向信号,结合动作捕捉数据集以及动作生成模型合成虚拟IMU数据,进而得到扩充数据;采用T‑pose校准方法,将扩充数据从IMU局部坐标系转换至SMPL人体坐标系,将四肢IMU的坐标系统一转换至腰部IMU的根坐标系,再将长序列划分为固定长度的滑动窗口,以窗口为基本单元输出预训练数据;通过预训练数据对滑动窗口的输出序列按时间片段进行随机掩码,并训练自编码器重建被掩码部分,利用编码器的预训练权重和分类器进行数据微调,并随机丢弃部分IMU信号,完成对多种人体动作的识别。该方法有效提升了动作识别的准确性与泛化能力。
外部リソース