[发明专利]模型构建方法及装置、数据报表生成方法及装置

说明书

本发明提供一种模型构建方法及装置、数据报表生成方法及装置，该模型构建方法包括：并行执行各基础指标的构建任务，生成若干基础指标表；对各汇总指标的构建任务分别进行时序分析，以确定各汇总指标的最快构建路径；按各最快构建路径分别执行各汇总指标的构建任务，生成若干汇总指标表；根据各基础指标表和各汇总指标表构建数据模型。其中，基础指标的构建任务基于该基础指标所依赖的源数据表执行，汇总指标的构建任务基于该汇总指标所依赖的基础指标表和/或汇总指标表执行。本发明充分利用集群的资源优势，大幅缩短了计算时间，保障了产出结果的时效性。

技术领域

本申请涉及数据处理技术领域，具体涉及一种模型构建方法及装置、数据报表生成方法及装置。

背景技术

在数据集市的建设中，随着业务系统的发展，数据量会不断增大，指标数量不断增多，数据表的依赖关系错综复杂。

一方面，上述问题会导致最终事实表的产生时间变晚，每天都不能及时产出结果以供进行分析和总结，以至于无法利用数据的时效性。例如在每日9点举行的销售早会中需要用到前一日的数据进行分析和总结，若无法在9点前及时产出结果，则无法利用前一日数据的时效性。

另一方面，由于业务情况复杂，需要经常根据竞争对手的动作调整指标，上述问题还会导致每次调整时引起所调整指标下游依赖该指标的整体回溯，回溯任务量非常庞大。

发明内容

鉴于现有技术中的上述缺陷或不足，期望提供一种缩短数据处理时间以保障产出结果时效性的模型构建方法及装置、数据报表生成方法及装置；并期望进一步提供一种减少调整指标后的回溯任务数量的模型构建方法及装置、数据报表生成方法及装置。

第一方面，本发明提供一种模型构建方法，该方法包括：

并行执行各基础指标的构建任务，生成若干基础指标表；

对各汇总指标的构建任务分别进行时序分析，以确定各汇总指标的最快构建路径；

按各最快构建路径分别执行各汇总指标的构建任务，生成若干汇总指标表；

根据各基础指标表和各汇总指标表构建数据模型。

其中，基础指标的构建任务基于该基础指标所依赖的源数据表执行，汇总指标的构建任务基于该汇总指标所依赖的基础指标表和/或汇总指标表执行。

第二方面，本发明还提供一种数据报表生成方法，包括上述模型构建方法，以及，根据该数据模型生成数据报表。

第三方面，本发明提供一种模型构建装置，该装置包括：

基础指标构建单元，配置用于并行执行各基础指标的构建任务，生成若干基础指标表；

时序分析单元，配置用于对各汇总指标的构建任务分别进行时序分析，以确定各汇总指标的最快构建路径；

汇总指标构建单元，配置用于按各最快构建路径分别执行各汇总指标的构建任务，生成若干汇总指标表；

模型构建单元，配置用于根据各基础指标表和各汇总指标表构建数据模型。

其中，基础指标的构建任务基于该基础指标所依赖的源数据表执行，汇总指标的构建任务基于该汇总指标所依赖的基础指标表和/或汇总指标表执行。

第四方面，本发明还提供一种数据报表生成装置，包括上述模型构建装置，以及，报表生成单元，配置用于根据该数据模型生成数据报表。

第五方面，本发明还提供一种设备，包括一个或多个处理器和存储器，其中存储器包含可由该一个或多个处理器执行的指令以使得该一个或多个处理器执行根据本发明各实施例提供的模型构建方法或数据报表生成方法。