一种基于三平面特征的大姿态人脸动画合成方法及系统

本发明提供一种基于三平面特征的大姿态人脸动画合成方法及系统，该方法的步骤包括：对参考图像进行预处理和编码，得到身份特征并输入到预设的扩散模型中得到静态三平面特征；基于预设的第一目标姿态和参考姿态计算相对变换矩阵，基于相对变换矩阵生成三维的采样网格，基于静态三平面特征对三维的采样网格进行插值得到视角对齐的特征图；对参考图像进行编码，得到外观编码，对外观编码与特征图进行融合输入到预设的特征上采样网络中，得到第一渲染图像；提取音频特征，并基于身份特征和音频特征得到潜在特征；基于音频特征和潜在特征构建最终形变场；基于最终形变场和静态三平面特征得到扭曲独立三平面特征，采用融合模块输出动态三平面特征。