검색으로 돌아가기
기록
基于特征解耦的时序协同校准的动作检测方法和装置
발명알 수 없음
9청구항 · 2 독립항
§ Ⅰ
개요
IPC 분류
G06V 20/52 (2022.01)G06V 10/774 (2022.01)G06V 10/82 (2022.01)G06V 20/40 (2022.01)G06V 10/764 (2022.01)G06V 10/766 (2022.01)G06V 40/20 (2022.01)G06V 10/80 (2022.01)G06T 7/20 (2017.01)G06N 3/094 (2023.01)G06N 3/084 (2023.01)G06N 3/0455 (2023.01)G06N 3/0442 (2023.01)G06N 5/04 (2023.01)G06N 3/0464 (2023.01)G06N 3/0499 (2023.01)G06N 3/0895 (2023.01)G06N 3/0985 (2023.01)
本发明公开了基于特征解耦的时序协同校准的动作检测方法和装置,该方法包括:监控视频经骨干网络提取片段级时序特征后分为工人分支和设备分支,通过特征解耦模块利用对抗训练与检测头反向传播输出语义锚定的独立纯净特征;纯净特征经自适应片段生成模块输出提议,同时经时序记忆网络增强;增强特征与提议共同输入跨主体时序协同模块,经时序RoI对齐后分类回归,同时利用大语言模型生成的结构化规则库并结合场景切分与MLP动态预测规则权重,构建协同损失强制工人动作与设备状态时序对齐;最后经时间轴生成器生成结构化文本。本发明在仅需少量标注的条件下,有效消除特征混杂与检测不一致问题,提升了动作检测精度与跨主体时序一致性。