検索に戻る
案件記録

一种基于循环状态更新的在线动作检测方法及系统

発明有効
1閲覧数
10請求項 · 2 独立
§ Ⅰ

案件概要

発明者

张洪博; 郑博圣; 刘景华; 孙真真; 杜吉祥

IPC分類

G06V 40/20 (2022.01)G06V 10/44 (2022.01)G06V 10/764 (2022.01)G06V 10/82 (2022.01)G06N 3/0442 (2023.01)G06N 3/045 (2023.01)G06N 3/0455 (2023.01)G06N 3/048 (2023.01)G06N 3/096 (2023.01)G06N 5/025 (2023.01)G06N 5/04 (2023.01)

本发明涉及人工智能与计算机视觉技术领域,具体涉及一种基于循环状态更新的在线动作检测方法及系统,包括如下步骤:S1视频帧输入与特征提取;S2记忆选择更新;S3记忆‑未来Transformer单元构建:所述记忆‑未来Transformer单元包括由Transformer编码器单元以及Transformer解码器单元组成的Transformer单元,在S2中的记忆更新完成后,所述记忆‑未来Transformer单元进一步构建潜在的未来特征表示;并将历史特征与构建的未来特征进行聚合,最后统一解码;S4采用交叉熵损失函数与知识蒸馏损失函数对S2和S3构建的模块进行整体优化:确保记忆选择更新模块融合更新的准确性v并确保记忆‑未来Transformer单元在训练过程中同时关注当前动作的准确识别和未来动作的准确预测。

外部リソース