基于交互性的RGB视频的三维人体反应运动生成方法

本发明公开了一种基于交互性的RGB视频的三维人体反应运动生成方法，包括：1、构建视频‑运动数据集；2、提取视频的局部视觉表征和全局视觉表征；3、构建并训练运动量化变分自编码器；4、构建并训练人体反应运动生成模型；5、利用训练后的模型基于交互性的视频进行人体反应运动生成。本发明基于掩码运动建模，同时考虑视频的全局表征和帧级局部表征来提取交互意图，并利用提取的交互意图指导反应运动的生成，局部视觉表征还被不断地注入网络中以最大化利用视频的动态属性，从而实现了一种从具有交互性的RGB视频生成三维人体反应运动的方法。