一种交互式教学游戏的多模态学习智能分析方法及系统

本发明公开一种交互式教学游戏的多模态学习智能分析方法及系统，属于任务调度技术领域。该方法包括：基于教育类解谜游戏的多模态过程数据集合中每一时刻对应的动作类型、面部特征、语音文本和游戏内反馈信息，构建结构化多模态事件序列；利用滑动窗口对结构化多模态事件序列进行逐段截取，并获取每一子序列所属的目标状态之后，构建认知状态演化轨迹序列；依据评价量规文本，构建评分规则树；基于评分规则树从结构化多模态事件序列及认知状态演化轨迹序列中筛选相应记录，以生成该多模态过程数据集合的分析报告。本发明可以输出客观、一致且具备证据追溯能力的评估报告。