一种基于多模态大语言模型的智能乳腺超声图文一致性质控方法及系统

本发明提供了一种基于多模态大语言模型的智能乳腺超声图文一致性质控方法及系统，应用于医学影像人工智能质控技术领域。针对差异化报告文件，通过直读与OCR双路径提取文本，借助大语言模型完成报告结构化，依次校验语义、必填项；采用目标检测识别图像体标、比例尺、病灶ROI，剔除不合格影像后基于体标方位完成病灶图像分组；利用LLaVA多模态模型生成各组影像结构化病灶描述；通过正反双向图文匹配校验，核查图像缺失、报告漏写、病灶特征不符等问题；最后整合三大模块数据，依据三维量化标准综合评定，输出可追溯乳腺超声质控报告，实现图文协同自动化质控。