검색으로 돌아가기
기록

一种基于视频对话的多模态抑郁症筛查方法及装置

발명알 수 없음
10청구항 · 2 독립항
§ Ⅰ

개요

발명자

廖永为; 陈炜炜; 张宜彬; 颜利宏

출원일

Jul 6, 2026

공개일

Oct 20, 2026

IPC 분류

G16H 50/30 (2018.01)G16H 50/70 (2018.01)G06F 18/213 (2023.01)G06F 18/25 (2023.01)G06F 18/243 (2023.01)G06F 18/2415 (2023.01)G06F 18/214 (2023.01)G06V 40/16 (2022.01)G06V 40/20 (2022.01)G06V 10/40 (2022.01)G06V 20/40 (2022.01)G06V 10/82 (2022.01)G06F 40/30 (2020.01)G06N 3/045 (2023.01)G06N 3/0895 (2023.01)G06N 3/096 (2023.01)G10L 25/03 (2013.01)G10L 25/63 (2013.01)G10L 25/66 (2013.01)G10L 25/30 (2013.01)A61B 5/16 (2006.01)A61B 5/00 (2006.01)

本发明涉及人工智能与医疗健康领域,公开了一种基于视频对话的多模态抑郁症筛查方法及装置,包括以下步骤:步骤一:多模态数据采集与预处理;步骤二:多模态特征提取;步骤三:跨模态特征对齐与融合;步骤四:抑郁症识别与评估;本发明中,采用基于交叉注意力的渐进式多模态融合方法,以视觉特征作为查询,分别与语音特征和文本特征进行交叉注意力计算,并通过残差连接与层归一化得到融合表征,使不同模态的特征在保留各自特异性的同时实现有效的跨模态交互,解决了现有技术中模态融合效果欠佳、融合表征判别力有限的问题,其次,本发明引入基于ChatGLM的多模态大模型架构,通过LoRA低秩适应技术进行参数高效微调,大幅降低了计算资源需求。

로그인하고 전문 읽기

청구항 1을 표시했습니다. 무료 가입하면 전체 10개 청구항, 명세서 전문, 전체 도면, 번역, 법적 상태를 볼 수 있습니다.

  • 전체 청구항
  • 기술 분야
  • 배경 기술
  • 발명의 내용
  • 도면 설명
  • 발명의 실시 형태