검색으로 돌아가기
기록
一种基于ClickHouse物化引擎监控的数据同步方法
발명유효
1조회수
10청구항 · 1 독립항
§ Ⅰ
개요
발명자
彭玲; 刘文峰; 殷伟文; 金亮
IPC 분류
G06F 16/27 (2019.01)G06F 16/28 (2019.01)G06F 16/23 (2019.01)
本发明属于计算机技术领域,特别涉及一种基于ClickHouse物化引擎监控的数据同步方法,包括对数据同步状态的监控与管理的数据源模块、同步任务调度模块、监控与异常处理模块和目标数据库模块,通过ClickHouse物化引擎对目标表的同步状态进行实时监控,及时发现异常并触发对应的恢复任务,显著提升容错能力,同时自动将JSON数据转换为ClickHouse兼容的嵌套结构,避免转义字符问题,提高目标表查询性能,相较于传统的手动配置映射,支持动态加载映射规则,具有更高的自动化程度,确保PostgreSQL和ClickHouse之间的数据同步保持一致,通过状态检查和异常处理,结合告警机制,能够有效提升系统的稳定性和数据可靠性。