一种基于大模型的数据采集方法、介质及设备

本发明涉及数据采集技术领域，尤其涉及一种基于大模型的数据采集方法、介质及设备，通过建立内容特性、用户需求、采集策略的关联模型，解决了一刀切式周期设置的弊端，提升了数据时效性；基于历史采集记录和数据采集周期进行账号分组，解决了静态账号分配导致的高难度任务账号不足、低频次任务账号闲置问题；通过将多要素协同的数据采集规则输入至预训练大模型，提升了数据采集的效率与标准化程度，提升了初始采集文本的有效性，通过预训练大模型对初始采集文本进行关联性校验，根据校验结果修正得到目标采集文本，最终输出格式统一、无矛盾、质量稳定的目标采集文本，提高了数据采集过程中的效率和可靠性。