검색으로 돌아가기
기록
一种基于视频对话的多模态抑郁症筛查方法及装置
발명알 수 없음
10청구항 · 2 독립항
§ Ⅰ
개요
발명자
廖永为; 陈炜炜; 张宜彬; 颜利宏
출원일
Jul 6, 2026
공개일
Oct 20, 2026
IPC 분류
G16H 50/30 (2018.01)G16H 50/70 (2018.01)G06F 18/213 (2023.01)G06F 18/25 (2023.01)G06F 18/243 (2023.01)G06F 18/2415 (2023.01)G06F 18/214 (2023.01)G06V 40/16 (2022.01)G06V 40/20 (2022.01)G06V 10/40 (2022.01)G06V 20/40 (2022.01)G06V 10/82 (2022.01)G06F 40/30 (2020.01)G06N 3/045 (2023.01)G06N 3/0895 (2023.01)G06N 3/096 (2023.01)G10L 25/03 (2013.01)G10L 25/63 (2013.01)G10L 25/66 (2013.01)G10L 25/30 (2013.01)A61B 5/16 (2006.01)A61B 5/00 (2006.01)
本发明涉及人工智能与医疗健康领域,公开了一种基于视频对话的多模态抑郁症筛查方法及装置,包括以下步骤:步骤一:多模态数据采集与预处理;步骤二:多模态特征提取;步骤三:跨模态特征对齐与融合;步骤四:抑郁症识别与评估;本发明中,采用基于交叉注意力的渐进式多模态融合方法,以视觉特征作为查询,分别与语音特征和文本特征进行交叉注意力计算,并通过残差连接与层归一化得到融合表征,使不同模态的特征在保留各自特异性的同时实现有效的跨模态交互,解决了现有技术中模态融合效果欠佳、融合表征判别力有限的问题,其次,本发明引入基于ChatGLM的多模态大模型架构,通过LoRA低秩适应技术进行参数高效微调,大幅降低了计算资源需求。
로그인하고 전문 읽기
청구항 1을 표시했습니다. 무료 가입하면 전체 10개 청구항, 명세서 전문, 전체 도면, 번역, 법적 상태를 볼 수 있습니다.
- 전체 청구항
- 기술 분야
- 배경 기술
- 발명의 내용
- 도면 설명
- 발명의 실시 형태