검색으로 돌아가기
기록
基于大小模型联动的语义分割堆煤识别方法、装置及介质
발명유효
9청구항 · 4 독립항
§ Ⅰ
개요
발명자
杨筱彧; 李涛; 罗川; 刘晏驰; 游磊; 朱兴林; 张先锋; 罗前刚; 张海峰; 饶俊宏; 郑芳菲; 黄倩; 赵安辉; 杨宇; 张建锋
IPC 분류
G06T 7/00 (2017.01)G06V 20/70 (2022.01)G06V 10/26 (2022.01)G06V 10/82 (2022.01)G06V 10/52 (2022.01)G06V 10/80 (2022.01)G06V 10/42 (2022.01)G06V 10/44 (2022.01)G06V 10/774 (2022.01)G06N 3/045 (2023.01)G06N 3/0464 (2023.01)G06N 3/082 (2023.01)G06N 3/096 (2023.01)G06N 3/0985 (2023.01)
本发明属于图像语义分割技术领域,具体涉及基于大小模型联动的语义分割堆煤识别方法、装置及介质,通过视觉小模型结合SAM大模型的语义分割方法,使用YOLOV11小模型进行粗语义分割,生成初始掩码;使用微调的SAM大模型进行精细分割,通过掩码编码器将粗掩码转换为提示词,结合图像特征输入掩码解码器输出最终分割结果;大小模型联动结合了小模型的效率和大模型的精度,解决了堆煤识别的实时性和泛化性问题。此外,SAM微调采用通专参数微调方法,保留泛化能力的同时适应堆煤场景;通过设置堆煤面积阈值触发报警,适用于煤矿井下复杂环境。实现了从图像输入、粗分割、精分割到基于面积阈值的自动报警,形成一个完整且无需人工干预的自动化闭环系统。