[发明专利]一种生成数据模型的方法和装置

说明书

本发明公开了一种生成数据模型的方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：根据用户输入的指标信息和维度信息，从指标配置库中匹配出对应的处理逻辑；其中，所述指标配置库中存储有多个处理逻辑，每个所述处理逻辑定义了数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系；对所述处理逻辑进行优化和拼接，以生成可执行数据开发脚本；执行所述可执行数据开发脚本，从而生成数据模型。该实施方式能够解决脚本开发工作量大和可复用性差的技术问题。

技术领域

本发明涉及计算机技术领域，尤其涉及一种生成数据模型的方法和装置。

背景技术

目前，数据仓库的数据模型大部分均由业务分析人员或者数据开发人员开发HQL脚本来生成数据模型。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

1)开发HQL脚本的门槛高，而且开发HQL脚本的工作量大；

2)HQL脚本可读性差、可复用性差、代码杂乱繁多，不便于维护，还会导致数据二义性。

发明内容

有鉴于此，本发明实施例提供一种生成数据模型的方法和装置，以解决脚本开发工作量大和可复用性差的技术问题。

为实现上述目的，根据本发明实施例的一个方面，提供了一种生成数据模型的方法，包括：

根据用户输入的指标信息和维度信息，从指标配置库中匹配出对应的处理逻辑；其中，所述指标配置库中存储有多个处理逻辑，每个所述处理逻辑定义了数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系；

对所述处理逻辑进行优化和拼接，以生成可执行数据开发脚本；

执行所述可执行数据开发脚本，从而生成数据模型。

可选地，在根据用户输入的指标信息和维度信息，从指标配置库中匹配出对应的处理逻辑之前，还包括：

根据用户预先配置的配置信息，生成处理逻辑，将所述处理逻辑存储到指标配置库中；

其中，所述配置信息包括数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系。

可选地，对所述处理逻辑进行优化和拼接，以生成可执行数据开发脚本，包括：

读取所述处理逻辑，以获取所述处理逻辑中定义的数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系；

将所述数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件实例化生成原子表；

根据所述算子和所述数据源之间的关联关系对所述原子表的内在计算逻辑进行优化和拼接，以生成可执行数据开发脚本。

可选地，根据所述算子和所述数据源之间的关联关系对所述原子表的内在计算逻辑进行优化和拼接，以生成可执行数据开发脚本，包括：

根据所述算子和所述数据源之间的关联关系，对所述原子表进行处理，以生成表派生表；

对所述派生表的内在计算逻辑进行优化和拼接，以生成可执行数据开发脚本。

可选地，所述原子表为AtomicTable对象，所述派生表为DerivedTa ble对象。

可选地，将数值的大小有意义的字段作为指标字段，将数值大小无意义的字段作为维度字段。

可选地，所述算子包括关联算子、聚合算子、合并算子、去重算子、选择算子和过滤算子中的至少一种。