№ CN122946677A発明
不明一种基于数据重复关系的业务数据清洗方法
本发明公开了一种基于数据重复关系的业务数据清洗方法,涉及业务数据清洗技术领域,包括步骤一:用于从历史数据存档中选取最近连续20个已确认为正常质量的数据批次,对每个批次每个字段分别计算集中重复度,并建立各字段的正常重复度基线;通过双维度交叉验证将横向批次内综合异常评分与纵向跨批次漂移识别相结合,对评分排名前10%且被标记为漂移影响记录的标记为双重确认异常直接清洗,对评分与漂移识别结论相矛盾的标记为单维异常进入人工核查队列,通过两个维度相互印证大幅降低单一维度误判导致的错误清洗或漏清洗风险,在确保清洗准确性的同时最大限度减少对人工审核的依赖。
❖北京市东晓视讯技术有限公司字明和; 杨慕良; 字泽清Oct 20, 2026§ 1/10 請求項G06F 18/10 (2023.01), G06F 17/16 (2006.01), G06F 18/2433 (2023.01)