CNIPA.AI
Back to Search
Dossier

一种基于多模态特征融合的数字教师个性化行为建模方法

InventionActive
2views
9Claims · 1 independent
§ Ⅰ

Dossier Overview

IPC Classification

G06T 13/40 (2011.01)G06T 15/00 (2011.01)G06F 18/10 (2023.01)G06F 18/25 (2023.01)G06F 18/23 (2023.01)G06F 16/903 (2019.01)G06V 40/16 (2022.01)G06V 10/20 (2022.01)G06V 40/10 (2022.01)G06V 10/34 (2022.01)G06V 40/20 (2022.01)G10L 25/63 (2013.01)G10L 25/03 (2013.01)G06F 123/02 (2023.01)

本发明公开了一种基于多模态特征融合的数字教师个性化行为建模方法,得到经预处理的多模态时序数据;将经预处理的多模态时序数据按语义一致性切分为行为片段;得到行为片段表示向量,对行为片段表示向量执行在线时序聚类,获得情绪—意图原型集合;输出置信度校准后的目标情绪—意图状态;生成数字教师动作触发意图;按照动作优先级与冲突解决规则生成调度后动作触发指令队列,剔除不合规动作指令并生成合规动作触发指令队列;在端侧或边缘设备中渲染数字教师表情、姿态、语音语调与教学辅助动作。本发明显著提升了数字人教师在真实教学场景下的互动自然度、动作可控性和教育规范性。

External Resources