CNIPA.AI
검색으로 돌아가기
기록

一种远航任务人员操作疲劳检测方法及系统

발명유효
10청구항 · 2 독립항
§ Ⅰ

개요

발명자

王子莹; 许硕贵; 王川; 周运超; 王腾蛟; 任旋; 杨健; 沈晓冬; 孙俊峰; 季公俊; 韩易; 丁猛; 叶旭春

IPC 분류

G06F 18/2431 (2023.01)G06F 18/25 (2023.01)G06F 18/21 (2023.01)G06V 40/16 (2022.01)G06V 10/82 (2022.01)G06N 3/045 (2023.01)G06N 3/0464 (2023.01)G06N 3/0455 (2023.01)G10L 25/51 (2013.01)

本发明涉及智能行为识别技术领域,尤其涉及一种远航任务人员操作疲劳检测方法及系统。该方法包括以下步骤:获取人员图像数据以及人员语音数据;根据人员语音数据进行语音触发事件识别,得到语音触发事件数据;根据人员图像数据进行面部动态特征提取,得到面部动态特征数据;将面部动态特征数据对语音触发事件数据进行跨模态锚嵌,得到多模态事件数据;对多模态事件数据进行反应延迟计算,得到事件反应数据;根据事件反应数据进行注意力水平处理,得到事件注意力数据;对事件注意力数据进行疲劳判定,得到人员疲劳数据。本发明通过构建语音触发与面部响应的多模态映射处理,有效捕捉操作人员的反应延迟与注意力波动,提升了疲劳状态识别的准确性。