검색으로 돌아가기
기록
文本分割方法及相关设备
발명유효
17청구항 · 5 독립항
§ Ⅰ
개요
발명자
陈鼎; 郭枝虾; 王昊; 李馨迟
IPC 분류
G06F 40/30 (2020.01)G06F 40/211 (2020.01)G06F 16/334 (2025.01)G06F 16/35 (2025.01)G06F 18/2135 (2023.01)G06F 18/27 (2023.01)G06N 3/045 (2023.01)G06N 3/0455 (2023.01)G06N 3/0442 (2023.01)G06N 3/096 (2023.01)G06N 5/04 (2023.01)G06N 7/01 (2023.01)
本公开提供一种文本分割方法及相关设备。该方法包括:获取待处理文本;将待处理文本分割为有序语句序列,得到待处理文本的初始语句集合;其中,有序语句序列包括多个语句;分别计算待处理文本的初始语句集合中待决策语句加入第一目标文本块时,所述第一目标文本块的语义变化量、困惑度变化量以及信息熵变化量,其中,第一目标文本块为符合合并条件的多个语句的集合;基于语义变化量、困惑度变化量以及信息熵变化量确定待决策语句与第一目标文本块的协同度;基于待决策语句与第一目标文本块的协同度对待处理文本进行分块,得到待处理文本的目标分块文本。本公开可以提高文本分割质量。