CNIPA.AI
返回搜索
档案

基于多模态大模型的恶劣天气车辆检测方法及相关设备

发明专利有效
10权利要求 · 4 独立
§ Ⅰ

卷宗概要

申请人

汕头大学

发明人

王栋梁; 张新澜; 仰乙静; 张森燚

IPC 分类

G06V 20/56 (2022.01)G06V 10/82 (2022.01)G06N 5/04 (2023.01)G06N 3/0464 (2023.01)

本申请实施例提供了一种基于多模态大模型的恶劣天气车辆检测方法及相关设备,属于车辆智能驾驶技术领域。该方法包括:获取车载摄像头采集的前方视频数据,提取帧图像信息;将帧图像信息输入融合模型,通过融合模型根据识别策略识别帧图像信息中的前方车辆,获得标注有前方车辆的特征图像信息;将特征图像信息输入多模态模型,通过多模态模型分析特征图像信息,获得环境信息和第一提示信息,并根据环境信息中的天气信息调整融合模型的识别策略;根据特征图像信息确定当前车辆与前方车辆间的特征距离,当特征距离小于预设距离,生成第二提示信息;输出第一提示信息和/或第二提示信息。本申请实施例提高恶劣天气条件下前车检测的精准度和驾驶安全性。