基于多模态数据的24点游戏创新能力智能测评方法及装置

本发明公开一种基于多模态数据的24点游戏创新能力智能测评方法及装置，包括，步骤1，预先录制4段讲解24点益智速算规则的短视频；系统实时记录被试的微课学习总时长；步骤2，构建包含5个难度等级的24点益智速算试题库；步骤3，采用录屏技术记录被试操作过程，采用录像技术同步采集被试的表情动作视频，采用音频采集技术记录被试的音频言语数据；步骤4，采用预训练的视觉网络MANET对步骤3采集的表情动作视频进行处理，提取面部表情特征；步骤5，构建基于双向长短时记忆网络的时序融合架构，分别对上述模态的特征进行动态建模。本发明利用在线短视频来实现在线微课学习，测评学习敏捷性，利用通关测试测评问题解决能力和抗挫折能力。