一种基于大数据的网络数据分布式方法、系统及存储介质

本发明公开了一种基于大数据的网络数据分布式方法、系统及存储介质，涉及大数据存储技术领域。该一种基于大数据的网络数据分布式方法、系统及存储介质，包括以下步骤：S1,采集机床数据同步过程中的同步数据,并对同步数据进行数据清洗和标准化处理；S2,将原始机床数据划分为多个原始块，计算冗余块数量预估值，将原始块加上冗余块附带元数据后异步发送；S3,接收并缓存同步数据块，通过解码和校验恢复原始数据，计算同步可靠性评估值，基于同步可靠性评估值调整冗余策略；S4,依据同步数据和同步可靠性评估值计算同步异常评估值，根据同步异常评估值进行异常分级并调整同步策略。解决了边缘节点同步数据时丢包严重影响数据一致性的问题。