[发明专利]基于大数据的数据处理方法、装置、设备及可读存储介质

权利要求书

1.一种基于大数据的数据处理方法，其特征在于，所述基于大数据的数据处理方法包括以下步骤：

在检测到包含数据主体的明细主键组件被选择时，获取所述明细主键组件对应的明细主键物理表；

获取选择的维度组件和指标组件，并获取所述维度组件对应的维度物理表，以及获取所述指标组件对应的指标物理表；

将所述明细主键物理表与所述维度物理表进行左关联，以及将所述明细主键物理表与所述指标物理表进行左关联，生成明细数据；

基于所述明细数据，生成数据宽表，以基于所述数据宽表进行数据处理。

2.如权利要求1所述的基于大数据的数据处理方法，其特征在于，所述基于所述明细数据，生成数据宽表的步骤包括：

将所述明细数据按照维度进行分组，得到分组数据；或，

将所述明细数据按照指标进行分组，得到分组数据；

将所述分组数据插入到宽表的物理表中，得到数据宽表。

3.如权利要求1所述的基于大数据的数据处理方法，其特征在于，所述在检测到包含数据主体的明细主键组件被选择时，获取所述明细主键组件对应的明细主键物理表的步骤之后，还包括：

将所述明细主键物理表的主键进行关联扩展，以使所述主键包含多个主键字段。

4.如权利要求1所述的基于大数据的数据处理方法，其特征在于，所述在检测到包含数据主体的明细主键组件被选择时，获取所述明细主键组件对应的明细主键物理表的步骤之前，还包括：

获取第一字段定义，其中，所述第一字段定义为基于构建明细主键组件的业务需求，提取对应的业务明细表的字段得到，所述第一字段定义包括主键字段、维度字段、指标字段和日期分区字段；

基于所述第一字段定义，构建明细主键物理表；

基于所述第一字段定义及所述明细主键物理表，构建明细主键组件，以供基于所述明细主键组件与其他组件进行组合生成数据宽表。

5.如权利要求4所述的基于大数据的数据处理方法，其特征在于，所述基于所述第一字段定义，构建明细主键物理表的步骤之后，还包括：

在初始化时，获取第一口径代码，其中，所述第一口径代码为基于构建明细主键组件的业务需求确定的代码；

基于所述第一口径代码，生成所述明细主键物理表的数据；

其中，所述基于所述第一字段定义及所述明细主键物理表，构建明细主键组件的步骤包括：

基于所述第一字段定义、所述明细主键物理表及所述第一口径代码，构建明细主键组件。

6.如权利要求1所述的基于大数据的数据处理方法，其特征在于，所述在检测到包含数据主体的明细主键组件被选择时，获取所述明细主键组件对应的明细主键物理表的步骤之前，还包括：

获取第二字段定义，其中，所述第二字段定义为基于构建维度组件的业务需求确定得到，所述第二字段定义包括主键字段、维度字段和日期分区字段；

基于所述第二字段定义，构建维度物理表；

基于所述第二字段定义及所述维度物理表，构建维度组件，以供基于所述维度组件与其他组件进行组合生成数据宽表。

7.如权利要求6所述的基于大数据的数据处理方法，其特征在于，所述基于所述第二字段定义，构建维度物理表的步骤之后，还包括：

在初始化时，获取第二口径代码，其中，所述第二口径代码为基于构建维度组件的业务需求确定的代码；

基于所述第二口径代码，生成所述维度物理表的数据；

其中，所述基于所述第二字段定义及所述维度物理表，构建维度组件的步骤包括：

基于所述第二字段定义、所述维度物理表及所述第二口径代码，构建维度组件。