复旦大学附属儿科医院

本公开涉及一种脉象识别方法、装置、系统、存储介质及程序产品。该方法包括：获取目标用户桡动脉的多个采集位置在不同调制压力下的脉搏波信号构成的脉搏波数据集；根据脉搏波数据集对应的幅值统计特征，确定相对采集深度，进而确定脉位类型；根据脉搏波数据集对应的传播时延特征，确定频散斜率曲线，进而确定脉形类型；根据脉搏波数据集对应的幅值包络特征，确定增益响应曲线，进而确定脉势类型；根据脉搏波数据集对应的脉率特征，确定脉数类型；根据脉位类型、脉形类型、脉势类型和脉数类型，确定目标用户对应的目标脉象。本实施例实现了脉象在位、数、形、势四个维度的客观分类识别，提高了脉象识别的准确率和泛化能力。

本发明提供一种基于多模态对比预训练的胸部病变辅助诊断方法及系统，用于对患者胸部医学图像中的病变进行辅助识别和分类。该方法包括：获取胸部医学图像及其对应的医学报告文本，构建医学图像—报告文本数据对；分别通过图像编码器和文本编码器提取图像特征向量和文本特征向量，并映射至同一特征空间，得到图像嵌入向量和文本嵌入向量；以同一数据对中的图像嵌入向量和文本嵌入向量作为正样本对，以不同数据对中的嵌入向量作为负样本对，基于跨模态特征相似度计算跨模态对比学习损失；根据负样本与锚点样本之间的跨模态特征相似度筛选困难负样本，并计算困难负样本对比学习损失；基于上述损失对图像编码器和文本编码器进行多模态对比预训练，得到预训练完成的图像编码器；利用带有胸部病变分类标签的胸部医学图像训练分类器，并将待诊断胸部医学图像输入训练完成的图像编码器和分类器，输出胸部病变辅助诊断分类结果。该方法能够提高胸部医学图像视觉表征质量和病变分类能力。