多模态医学特征提取模型训练方法、装置、设备及介质

本申请提供一种多模态医学特征提取模型训练方法、装置、设备及介质。本申请的方法包括：获取目标诊断对象对应的诊断图像样本和诊断文本样本，各诊断图像样本和各诊断文本样本均携带表征医学语义特征的多热标签；根据多热标签确定诊断图像样本和诊断文本样本间的第一语义相似度；根据初始多模态医学特征提取模型确定诊断图像样本和诊断文本样本间的第二语义相似度；以最小化第一语义相似度和第二语义相似度之间的差异为目标，对初始多模态医学特征提取模型进行训练，得到多模态医学特征提取模型，多模态医学特征提取模型用于输出语义对齐的图像特征表示和文本特征表示。采用本申请的方法训练得到的模型，具备语义理解精准、泛化能力强等优点。