CNIPA.AI
검색으로 돌아가기
기록

医学实体识别大模型微调方法和加速推理方法

발명유효
12청구항 · 2 독립항
§ Ⅰ

개요

발명자

张怡; 章永; 秦宇晨; 应华永

IPC 분류

G16H 50/70 (2018.01)G16H 10/60 (2018.01)G06F 40/279 (2020.01)G06N 5/04 (2023.01)G06N 5/046 (2023.01)G06N 3/0455 (2023.01)

本发明公开了一种医学实体识别大模型微调方法,基于大模型对搜集的电子病案进行实体关系抽取,得到抽取结果;再对结果并进行负采样和数据增强;构建基座模型和损失函数进行训练,得到医学实体识别大模型;再基于该大模型进行医学实体识别。采用本发明的显著效果是:本发明的技术方案通过“多令牌并行预测+验证回滚”机制,在不牺牲精度的情况下,能将推理速度提高2~5倍;同时,通过合适的训练,能降低微调占用显存,缩短训练时间。