CNIPA.AI
검색으로 돌아가기
기록

一种基于大语言模型的命名实体识别增强方法及系统

발명유효
1조회수
9청구항 · 5 독립항
§ Ⅰ

개요

발명자

于丰畅; 陆伟; 郭欣程

IPC 분류

G06F 40/295 (2020.01)G06F 40/166 (2020.01)G06F 40/216 (2020.01)G06N 5/04 (2023.01)G06N 3/08 (2023.01)

本发明公开一种基于大语言模型的命名实体识别增强方法及系统,属于自然语言处理技术领域,包括:首先,利用直接偏好对齐对大语言模型进行训练,使其生成的改写文本在语义或句法结构上更适配命名实体识别模型的识别模式;其次,利用偏好对齐的大语言模型对输入文本进行多次上下文改写,将导致命名实体识别模型识别失败或低置信度输出的困难样本转化为高置信度可识别的候选文本;最后,通过多数投票机制对多个改写语句识别结果进行集成,并结合原句实体识别结果输出最终实体识别结果。本方法有效提升命名实体识别模型在长尾实体、未登录词及复杂上下文场景下的识别准确率与鲁棒性。