一种基于生成对抗网络的数字人面部表情生成方法及系统

本申请提供一种基于生成对抗网络的数字人面部表情生成方法及系统，涉及人工智能技术领域，通过获取多模态数据集并进行预处理，得到目标语音信息、目标文本内容以及目标表情参数序列；从目标语音信息和目标文本内容中提取出语音基础特征和上下文语义向量，通过多模态融合网络将二者进行加权整合，生成语义表示向量，结合预设动作约束，生成表情序列；计算表情序列中各图像帧与政务场景表情要求的匹配度、每个图像帧的表情真实度评分以及相邻图像帧的跨帧连贯度评分，进而生成目标表情序列；利用三维数字人模型生成初步面部表情并优化，得到面部表情动画；实现了符合政务规范、自然连贯且适配多场景交互需求的数字人面部表情生成。