一种工程项目多源数据的采集校验与存储回溯方法及系统
本发明公开了一种工程项目多源数据的采集校验与存储回溯方法及系统,涉及数据处理技术领域,方法包括:通过实时同步与批量抽取采集多源异构数据,对采集到的数据进行多重校验,校验通过的数据配置唯一标识ID后存入数据仓库形成标准化数据集,同时将采集来源、清洗规则和汇总加工节点信息关联至唯一标识ID存储为全链路流转日志;并在全链路流转日志中反向检索输出原始数据来源;多维度建立联合索引,接收维度组合条件检索并输出原始明细记录;以唯一标识ID为关联主键将来源信息和明细记录聚合导出完整数据记录。本发明通过双模式采集、全链路日志和多维索引,实现工程项目多源数据的统一采集、质量校验、溯源与导出。