CNIPA.AI
검색으로 돌아가기
기록

一种文本分区长度确定方法、装置、设备和介质

발명유효
7조회수
10청구항 · 4 독립항
§ Ⅰ

개요

발명자

刘冬寅; 彭健强; 罗中鸣; 冯静

IPC 분류

G06F 40/284 (2020.01)G06F 40/30 (2020.01)

本发明实施例提供了一种文本分区长度确定方法、装置、设备和介质,方法包括:获取文本数据和至少一个滑动步长;基于至少一个滑动步长对文本数据进行滑动窗口采样,确定至少一个第一候选区间;确定至少一个第一候选区间中的各个第一候选区间的第一整体评价得分,第一整体评价得分基于第一候选区间内的多个分区长度的召回率和准确率的加权综合评价得到;根据第一整体评价得分,在至少一个第一候选区间中确定目标区间;对目标区间应用黄金分割法,确定目标分区长度,有效提高了召回率和准确率,保证大模型在实际生产中的应用。