一种基于多通道融合学习的动作识别方法与系统

本发明涉及动作识别技术领域，公开了一种基于多通道融合学习的动作识别方法与系统，包括对视频获取及单帧分离、分割成图像序列，对图像序列依次进行预处理，空间和时间特征提取，多模态动作识别，对于获取的单帧图像采用全连接层将特征映射到高维空间，将这些特征进行融合，结合空间和时间上的信息；本发明通过数据获取模块对待观测对象中视频数据进行采集并进行单帧分离，分离出的单帧图像经过一系列预处理，识别出具体的动作类别，采用全连接层将特征映射到高维空间，将这些特征进行融合，使用空间和时间上的信息结合，有效地描述一个实际动作，采用多通道的方式提取到不同分辨率上的语义信息，具有更好的可解释性。