検索に戻る
案件記録
一种基于数据重复关系的业务数据清洗方法
発明不明
10請求項 · 1 独立
§ Ⅰ
案件概要
IPC分類
G06F 18/10 (2023.01)G06F 17/16 (2006.01)G06F 18/2433 (2023.01)
本发明公开了一种基于数据重复关系的业务数据清洗方法,涉及业务数据清洗技术领域,包括步骤一:用于从历史数据存档中选取最近连续20个已确认为正常质量的数据批次,对每个批次每个字段分别计算集中重复度,并建立各字段的正常重复度基线;通过双维度交叉验证将横向批次内综合异常评分与纵向跨批次漂移识别相结合,对评分排名前10%且被标记为漂移影响记录的标记为双重确认异常直接清洗,对评分与漂移识别结论相矛盾的标记为单维异常进入人工核查队列,通过两个维度相互印证大幅降低单一维度误判导致的错误清洗或漏清洗风险,在确保清洗准确性的同时最大限度减少对人工审核的依赖。
ログインして全文を読む
請求項 1 を表示しています。無料登録で全 10 項の請求項、明細書全文、全図面、翻訳、法的状態を閲覧できます。
- 全請求項
- 技術分野
- 背景技術
- 発明の概要
- 図面の説明
- 発明を実施するための形態
外部リソース