一种基于规则画像的数据增量清洗方法

本发明涉及数据清洗技术领域，具体涉及一种基于规则画像的数据增量清洗方法，该方法首先生成字段级规则画像，将数据源属性、字段特征、格式规则、业务约束及历史修正轨迹转化为有序特征并标记稳定状态；其次匹配新批次字段与规则画像，生成字段级清洗任务清单；再对增量数据分区扫描，通过指纹比对确定变化分区及关联分区；随后对变化片段按字段依赖关系执行增量清洗；最后写入字段状态索引与数据版本关系，更新规则画像并输出清洗结果。