一种基于深度学习的冬虫夏草鉴定方法及系统

本发明公开了一种基于深度学习的冬虫夏草鉴定方法及系统，该方法包括如下步骤：获取待鉴定的冬虫夏草图像及其对应的文本描述信息；利用对比学习任务对图像和文本进行特征提取，得到图像的整体特征和文本特征；进行序列编码和多模态信息融合，生成多模态特征表示；将多模态特征表示输入至经过训练的多模态编码器模块，输出增强后的多模态特征；将增强后的多模态特征输入至经过训练的多模态解码器模块，生成关于冬虫夏草类别的多组候选文字描述；最后，计算图像与各组候选文字描述的相似度值，选出相似度值最高的候选文字描述作为最终鉴定结果。本发明能够充分学习冬虫夏草在不同生长阶段及环境条件下的外观差异，显著提升真伪鉴别的准确率。