一种基于形象克隆的虚拟形象模型构建方法及系统

本发明公开了一种基于形象克隆的虚拟形象模型构建方法及系统，涉及计算机图形学领域，包括：从真实人物的实时音视频流中获取并融合视觉、语音和动作的多模态数据；分别提取面部表情、语音和动作的情感数据；采用动态时间规整算法计算各模态情感数据间的相似度，生成量化模态同步关系的模态关联映射矩阵；采用机器学习模型构建情感标签到肢体姿态的表情动作映射模型；根据表情与动作的偏差对特征进行反馈调整；最后，基于调整后的特征、映射矩阵及映射模型，生成表情、语音和动作在时间轴上精准对齐的虚拟形象。本发明通过建立模态间的量化关联与反馈调整机制，显著提升了虚拟形象在克隆真人时于多维度情感表达上的真实感与协调性。