交流辅助方法及相关装置、系统和介质

本申请公开了一种交流辅助方法及相关装置、系统和介质，其中交流辅助方法包括：获取由第一对象穿戴的交流辅助系统中若干器件各自的采集数据；基于运动数据，建模得到与第一对象的肢体动作语义一致的文字信息，并基于音频数据，建模得到第一对象与第二对象交流过程中第二对象的语音信息，基于视频数据，建模得到视觉特征，及基于脑电数据，建模得到第一对象不同头颅区域的生物电信号；基于文字信息、语音信息、视觉特征和生物电信号，构造多模态指令；基于多模态大模型响应多模态指令的输出数据，选择驱动交流辅助系统的扬声器或者驱动脑电波器件。上述方案，能够实现残障人士与普通人之间的自适应双向交流。