基于多模态大模型的核查举证图斑识别方法及装置

本申请公开了一种基于多模态大模型的核查举证图斑识别方法及装置，涉及图像识别技术领域。该方法包括：获取地物影像数据并提取图斑图像；对每个图斑图像进行数据标注，得到多个标注图像；基于多个标注图像联合文本数据集，构建联合数据集；通过多类别对比测试选取基座模型，并设置提示词，对基座模型进行初始训练并基于KV缓存技术替换原始缓存，以提升模型的推理效率；得到改进多模态大模型并将其部署至核查举证系统。本申请有效解决了传统的人工图斑核查举证过程中的审核过程周期长、审核效率低、审核质量不一致的技术问题。进而实现了提升审核效率、降低审核成本、确保高并发处理能力的同时不间断识别处理的技术效果。