CNIPA.AI
返回搜索
档案

一种基于视频对话的多模态抑郁症筛查方法及装置

发明专利未知
10权利要求 · 2 独立
§ Ⅰ

卷宗概要

发明人

廖永为; 陈炜炜; 张宜彬; 颜利宏

申请日

Jul 6, 2026

公开日

Oct 20, 2026

IPC 分类

G16H 50/30 (2018.01)G16H 50/70 (2018.01)G06F 18/213 (2023.01)G06F 18/25 (2023.01)G06F 18/243 (2023.01)G06F 18/2415 (2023.01)G06F 18/214 (2023.01)G06V 40/16 (2022.01)G06V 40/20 (2022.01)G06V 10/40 (2022.01)G06V 20/40 (2022.01)G06V 10/82 (2022.01)G06F 40/30 (2020.01)G06N 3/045 (2023.01)G06N 3/0895 (2023.01)G06N 3/096 (2023.01)G10L 25/03 (2013.01)G10L 25/63 (2013.01)G10L 25/66 (2013.01)G10L 25/30 (2013.01)A61B 5/16 (2006.01)A61B 5/00 (2006.01)

本发明涉及人工智能与医疗健康领域,公开了一种基于视频对话的多模态抑郁症筛查方法及装置,包括以下步骤:步骤一:多模态数据采集与预处理;步骤二:多模态特征提取;步骤三:跨模态特征对齐与融合;步骤四:抑郁症识别与评估;本发明中,采用基于交叉注意力的渐进式多模态融合方法,以视觉特征作为查询,分别与语音特征和文本特征进行交叉注意力计算,并通过残差连接与层归一化得到融合表征,使不同模态的特征在保留各自特异性的同时实现有效的跨模态交互,解决了现有技术中模态融合效果欠佳、融合表征判别力有限的问题,其次,本发明引入基于ChatGLM的多模态大模型架构,通过LoRA低秩适应技术进行参数高效微调,大幅降低了计算资源需求。

登录后阅读全文

已显示权利要求 1。免费注册即可阅读全部 10 项权利要求、说明书全文、全部附图、翻译和法律状态。

  • 全部权利要求
  • 技术领域
  • 背景技术
  • 发明内容
  • 附图说明
  • 具体实施方式