검색으로 돌아가기
기록
动作识别模型的训练方法、动作识别方法及相关设备
발명유효
10청구항 · 4 독립항
§ Ⅰ
개요
발명자
王沁心; 王重九; 孙志亮; 黄鹏
IPC 분류
G06V 40/20 (2022.01)G06V 20/40 (2022.01)G06V 10/74 (2022.01)G06V 10/764 (2022.01)G06V 10/774 (2022.01)G06V 10/82 (2022.01)G06N 3/045 (2023.01)G06N 3/08 (2023.01)G06N 3/084 (2023.01)G06N 3/092 (2023.01)
本申请公开了一种动作识别模型的训练方法、动作识别方法及相关设备,训练方法包括:视频样本含有动作片段并标记有动作描述文本,将视频样本输入至待训练的视频分段网络进行视频片段划分,得到片段预测结果;利用预先训练的视频编码网络和文本编码网络对片段预测结果和动作描述文本分别进行视频编码和文本编码,得到视频片段特征和描述文本特征;计算视频片段特征与描述文本特征之间的相似度,基于相似度更新视频分段网络的网络参数,得到训练完成的视频分段网络,可以不用获取动作片段起始位置的标注样本便可以实现视频分段网络的训练,提高视频分段网络训练的效率,且可以实现对零样本动作视频进行分段,提高零样本动作识别的准确性。