CNIPA.AI
Back to Search
Dossier

一种基于数据重复关系的业务数据清洗方法

InventionUnknown
10Claims · 1 independent
§ Ⅰ

Dossier Overview

Inventor

字明和; 杨慕良; 字泽清

Filing Date

Aug 10, 2026

Publication Date

Oct 20, 2026

IPC Classification

G06F 18/10 (2023.01)G06F 17/16 (2006.01)G06F 18/2433 (2023.01)

本发明公开了一种基于数据重复关系的业务数据清洗方法,涉及业务数据清洗技术领域,包括步骤一:用于从历史数据存档中选取最近连续20个已确认为正常质量的数据批次,对每个批次每个字段分别计算集中重复度,并建立各字段的正常重复度基线;通过双维度交叉验证将横向批次内综合异常评分与纵向跨批次漂移识别相结合,对评分排名前10%且被标记为漂移影响记录的标记为双重确认异常直接清洗,对评分与漂移识别结论相矛盾的标记为单维异常进入人工核查队列,通过两个维度相互印证大幅降低单一维度误判导致的错误清洗或漏清洗风险,在确保清洗准确性的同时最大限度减少对人工审核的依赖。

Sign in to read the full text

Claim 1 is shown. Create a free account to read all 10 claims, the full description, all drawings, translations and legal status.

  • All claims
  • Technical field
  • Background
  • Summary
  • Drawing descriptions
  • Detailed description

External Resources