検索に戻る
案件記録

一种多源异构数据清洗方法

発明有効
8請求項 · 1 独立
§ Ⅰ

案件概要

発明者

吴学军; 刘彦龙

IPC分類

G06F 16/215 (2019.01)G06F 16/25 (2019.01)G06F 16/23 (2019.01)G06F 18/2433 (2023.01)G06F 18/241 (2023.01)G06F 21/64 (2013.01)G06N 20/00 (2019.01)G06N 3/0464 (2023.01)G06N 3/0442 (2023.01)H04L 9/00 (2022.01)G06F 123/02 (2023.01)

本发明公开了一种多源异构数据清洗方法,涉及数据处理技术领域。包括:采集低空空域的多源数据,将多源数据划分为不同数据类型;构建可动态更新的特征库,调用特征库对分类后的多源数据进行归一化处理,转换为统一格式的结构化数据;构建空域场景感知模型,通过时序分析输出数据异常概率,根据预设阈值判定异常数据及异常类型;针对不同异常类型匹配对应的修复策略,完成修复后将数据输入空域场景感知模型进行二次验证,判定修复是否合格;对修复合格的清洗数据进行可信存证,当数据变化满足预设条件时,重复上述步骤进行数据重新清洗并更新存证信息。本发明提高了数据清洗的效率与准确性,同时保障了数据的可信度。

外部リソース