一种基于适老烹饪终端的面向高龄用户的多模态交互方法及系统

本发明公开一种基于适老烹饪终端的面向高龄用户的多模态交互方法及系统，该方法包括：步骤一：收集训练用的语音指令数据；步骤二：将语音指令数据输入到预设的方言识别模型中，得到预测的语音识别结果；步骤三：基于总损失函数计算预测的语音识别结果和真实结果的损失，最小化所述损失得到最优的方言识别模型；步骤四：收集目标用户的语音指令数据和适老烹饪终端的按键状态；步骤五：将目标用户的语音指令数据输入到最优的方言识别模型中，得到语音识别结果；步骤六：将语音识别结果和按键状态进行协同验证，若验证成功则执行语音指令。本发明提高了适老烹饪终端方言识别地准确率，给出了多交互模式降低了触控界面误触的情况。