基于异构情感语义图与长序列情绪建模的数字人构建方法及装置

本发明公开了一种基于异构情感语义图与长序列情绪建模的数字人构建方法及装置，包括：获取文本、语音及视觉图像的多模态情感输入数据，提取特征并构建带时间戳的多模态情感特征集合；构建异构情感语义图，包含用户实体节点、模态特征节点与情绪概念节点，通过多类型边结构建模语义关联、状态转移与冲突抑制关系，引入动态演化与冲突判别机制；利用局部‑全局双层情绪建模机制对情绪状态序列进行时序建模，分别捕捉短时波动与长时趋势；将情绪状态与模态特征进行跨模态融合，解码为控制数字人表情、语音与动作的行为参数；驱动数字人多模态情感表达。与现有技术相比，本发明能够有效提升情绪识别的准确性、表达的连贯性与自然度。