검색으로 돌아가기
기록
基于可见光与声纹的多模态信息融合情绪检测方法
발명유효
2조회수
8청구항 · 3 독립항
§ Ⅰ
개요
발명자
刘海英; 徐振华; 贾锰; 王瑞鹏; 王超群; 刘换玲; 邓立霞
IPC 분류
G06F 18/25 (2023.01)G06F 18/2433 (2023.01)G06V 20/40 (2022.01)G06V 40/16 (2022.01)G06V 10/82 (2022.01)G06N 3/0464 (2023.01)G06N 3/082 (2023.01)G08B 21/04 (2006.01)G08B 29/18 (2006.01)G10L 25/63 (2013.01)G10L 17/02 (2013.01)G10L 17/08 (2013.01)G10L 17/26 (2013.01)
本发明涉及人工智能技术领域,尤其是提供了一种基于可见光与声纹的多模态信息融合情绪检测方法。该方法包括通过可见光图像模块和音频声纹采集模块,分别采集监控环境中老年人的视频图像和环境声音;利用面部表情检测模块对视频图像中的人脸进行识别,输出视觉异常信号;根据声纹检测模块对环境声音中的音频声纹信号进行识别,输出音频异常信号;将视觉异常信号与音频异常信号输入多模态信息融合模块,获得判定结果,该方法有效的提升了检测准确性、减少漏报、适应家居及养老机构环境,对保障老年人安全、减缓因跌倒导致的严重后果具有重要意义。