基于数据湖和分析数据库的数据处理方法及系统
本申请提供了一种基于数据湖和分析数据库的数据处理方法及系统,可以应用于大数据技术领域。包括:从多种异构数据源采集业务数据,将业务数据封装为标准化事件;根据所述标准化事件的主键,将所述标准化事件写入数据湖系统,其中,所述数据湖系统根据写入操作生成提交实例并记录提交时间戳;获取所述数据湖系统中提交时间戳大于已同步最大提交时间戳的增量数据,将所述增量数据写入分析数据库;响应于数据分析请求,基于所述数据分析请求所指向的目标时间范围,将所述数据分析请求路由至所述分析数据库或所述数据湖系统。