基于多模通信与行为识别的车载智能监控方法及系统

本发明公开了基于多模通信和行为识别的车载智能监控方法及系统，涉及车载电子和计算机视觉相关领域，该方法采用多模通信，将采集的网络信号强度，车辆行驶状态，以及驾驶室实时图像和视频数据上传至系统，并根据历史数据预测网络信号强度变化，制定多因素决策策略自动切换通信网络；应用自适应夜间光照环境的预训练目标检测模型定位驾驶员的面部区域，并通过关键点检测获取面部关键点，结合目标跟踪算法跨帧跟踪驾驶员的动态疲劳特征，分析驾驶员眼部状态、头部姿态和打哈欠行为，计算驾驶员疲劳指数，通过分层预警保障车辆行驶安全。解决了现有车载智能监控系统通信方式单一，系统中嵌入的疲劳驾驶检测模型对驾驶员面部区域定位不准确的问题。