一种知识锚定检索的鲁棒性光学化学结构识别方法及系统

本发明涉及一种知识锚定检索的鲁棒性光学化学结构识别方法及系统，包括：构建领域多模态知识图谱；构建多模态训练数据集；构建三塔联合编码网络；基于多模态对比学习对三塔联合编码网络进行多任务联合训练；将知识图谱中各化学品实体对应的文本嵌入与拓扑嵌入进行融合，预计算并存储为静态安全画廊矩阵，部署于边缘端设备；输出与查询图像匹配的化学品实体识别结果。本发明的有益效果是：本发明将知识约束从事后校验前置为训练全程的结构正则，通过闭集安全画廊的硬约束将输出空间严格限定于已验证物理实体，从推理机制上根本杜绝了化学键虚构、元素突变、无限碳链等幻觉问题，输出结果天然具备完全的化学结构有效性。