一种基于多模态AI大模型的智能助盲眼镜交互系统

本发明公开一种基于多模态AI大模型的智能助盲眼镜交互系统，涉及视障智能穿戴与嵌入式多模态大模型交互技术。针对现有助盲设备功能单一、缺少多模态融合识别、无上下文记忆、对话模式固化、续航差的问题，本发明在助盲眼镜本地部署轻量化多模态AI大模型智能体，配套多模态视觉感知、双模式多方言双语语音交互、短时+专属双层记忆、联网语音检索、自适应功耗管控模块。系统可连续10分钟完成视频图像解析，支持半双工/全双工可打断对话切换，兼容主流方言与中英双语，依托双层记忆实现连贯对话与个性化物品、人脸识别，同时通过分级功耗策略平衡连续识别能力与设备续航。本发明通过本地多模态大模型集成架构、双层记忆交互、双模式语音对话、智能功耗管理四大核心创新，解决传统助盲设备交互能力弱、个性化不足、续航受限的痛点，适用于视障人群户外出行、居家生活全场景智能辅助，具备良好的落地应用价值。