数仓作业链路缩短方法、装置、设备、存储介质及产品

本申请公开了一种数仓作业链路缩短方法、装置、设备、存储介质及产品，涉及大数据处理技术领域，所述数仓作业链路缩短方法包括：获取待分析的加工作业，其中，所述加工作业至少包括一个SQL脚本；针对每个所述SQL脚本，构建关系解析树；将每个所述加工作业中的所有所述关系解析树按执行顺序串联，得到关系解析树序列，并对所述关系解析树序列进行冗余节点去除，得到目标关系解析树序列；基于所述目标关系解析树序列，对所有所述加工作业进行全局依赖关系分析，得到可跳过链路。通过上述不同层次的数据处理，可以明显降低数据复杂度，提升ETL作业的性能。