一种通用化的多源异构政务服务事项数据自动更新实现方法

本发明公开一种通用化的多源异构政务服务事项数据自动更新实现方法，涉及数据处理技术领域；创建多源异构政务服务事项数据自动更新系统，通过数据采集模块采用增量式数据采集策略，在首次全量采集后，后续仅采集发生变化的数据，并设置统一的数据采集接口，通过数据清洗与转换模块构建通用的数据清洗规则库，对采集到的多源异构数据进行清洗操作，通过数据质量评估模块制定多维度的数据质量评估指标体系，采用机器学习算法构建数据质量评估模型，将清洗转换后的数据输入数据质量评估模型，根据评估结果，对数据质量较低的数据进行二次清洗或标记，通过数据融合与更新模块将来自不同数据源的同一实体数据进行合并；通过监控与反馈模块对数据采集、清洗、转换、融合和更新的整个过程进行实时监控，记录各环节的运行状态、数据处理量、错误信息。