基于大语言模型的多源异构网格化事件记录消重方法

本发明公开了一种基于大语言模型的多源异构网格化事件记录消重方法，包括：获取来自不同数据源的网格事件数据记录，利用分块技术初步将事件记录进行划分为不同事件块，将事件块中的记录划分为若干个等大小的事件记录集合，利用大语言模型对每个事件记录集合进行分类操作，将可能属于同一事件并未进行判断的记录组合形成新的事件记录集合让大语言模型进行分类，根据聚类结果进行事件记录消重操作，作为事件库构建的前置操作。本发明解决了现有方法比较次数多、计算成本大、效率低的缺点，能更快速、低成本、高准确率的实现多源异构网格化事件记录的消重操作。