基于多模态大模型的配网架空线路设备检测方法及其装置

本发明公开了一种基于多模态大模型的配网架空线路设备检测方法及其装置。该检测方法包括：通过无人机采集配网架空线路的图像；根据检测目标，构建适用于配网设备的语言提示；将图像和语言提示输入到多模态大模型中进行设备检测；通过多模态大模型输出图像中的包括检测框、设备类别和置信度的检测结果；对检测结果进行包括NMS过滤和置信度筛选的后处理，并得到配网架空线路上各设备的识别结果；可视化展示识别结果。本发明利用多模态大模型固有的开放词汇检测能力，仅需通过修改语言提示即可识别新的设备类型，无需重新训练模型，降低对大量标注数据的依赖，节省人力成本，准确率高、泛化能力强以及成本低，实现自动化巡检。