广西水发集团数字智慧水务科技有限公司

本发明涉及数字人系统的技术领域，提供了多模态自适应交互AI数字人系统及方法，包括多模态感知终端、语义理解终端、行为生成终端、数字人呈现终端和交互管理终端；多模态感知终端用于获取多模态输入，形成多模态输入特征包；语义理解终端用于对多模态输入特征包进行解析，整理为意图向量；行为生成终端用于根据意图向量生成行为输出指令；数字人呈现终端用于接收行为输出指令，并依次驱动数字人模型的语音输出、口型同步、面部表情变化及肢体动作呈现，以生成与用户输入相匹配的可视化与可听化交互效果；交互管理终端用于对各终端的运行状态、数据流向与响应节奏进行统一协调。本发明具有提高数字人的实时交互质量的效果。