[发明专利]一种数据仓库的存储方法及装置

权利要求书

1.一种数据仓库的存储方法，包括：

将所述数据仓库中的操作性数据以预定周期为间隔保存为快照存储；

将每个所述快照存储以拉链方式整合生成细节数据层并进行存储；

将每个所述快照存储以拉链方式整合生成细节数据层并进行存储的步骤包括：

将所述快照存储分别存储在用于区分闭链数据和有效数据的pdata_status物理分区以及用于文件裁剪的pend_date物理分区。

2.根据权利要求1所述的方法，将所述数据仓库中的操作性数据以预定周期为间隔保存为快照存储包括：

根据业务特点对于面向业务的操作性数据采取增量或全量的抽取方式。

3.根据权利要求1所述的方法，将每个所述快照存储以拉链方式整合生成细节数据层并进行存储的步骤还包括：

通过全量拉链、增量拉链或增量流水的拉链方式将每个所述快照存储整合生成细节数据层并进行存储。

4.根据权利要求3所述的方法，所述通过全量拉链的拉链方式将每个所述快照存储整合生成细节数据层的步骤包括：

将所述预定周期内全量抽取的数据与历史数据作为主键索引；

将更新前的过期数据闭链处理存入所述pdata_status物理分区的expired分区中，并且将所述pend_date物理分区的值设为所述预定周期；其中，所述expired分区用于存储更新前的过期数据；

将更新后或者无更新的数据存入所述pdata_status物理分区的active 分区中，并且将所述pend_date物理分区的值设为最大；其中，active分区用于存储当前的有效数据；

将所述active分区写入bkt库，所述bkt库为备份数据库，用于存储每日全量有效数据，以及用于和第二天重新拉取的数据关联，还用于拉链表本身的回溯。

5.根据权利要求3所述的方法，所述通过增量拉链的拉链方式将每个所述快照存储整合生成细节数据层的步骤包括：

将所述预定周期内增量抽取的数据与历史数据作为全主键索引；

若所述主键在历史表和所述预定周期的快照表中均存在，则将所述历史表中的记录写入所述pdata_status物理分区的expired分区中，并且将所述pend_date物理分区的值设为所述预定周期；其中，所述expired分区用于存储更新前的过期数据；将未写入所述pdata_status物理分区的expired分区中的数据写入所述pdata_status物理分区的active分区中，并且将所述pend_date物理分区的值设为最大；其中，active分区用于存储当前的有效数据；将所述active分区写入bkt库，所述bkt库为备份数据库，用于存储每日全量有效数据，以及用于和第二天重新拉取的数据关联，还用于拉链表本身的回溯。

6.根据权利要求3所述的方法，所述通过增量流水的拉链方式将每个所述快照存储整合生成细节数据层的步骤包括：

将所述预定周期内增量抽取的数据保存为快照存储。

7.一种数据仓库的存储装置，包括：

用于将所述数据仓库中的操作性数据以预定周期为间隔保存为快照存储的装置；

用于将每个所述快照存储以拉链方式整合生成细节数据层并进行存储的装置；

所述用于将每个所述快照存储以拉链方式整合生成细节数据层并进行存储的装置包括：

用于将所述快照存储分别存储在用于区分闭链数据和有效数据的pdata_status物理分区以及用于文件裁剪的pend_date物理分区的装置。

8.根据权利要求7所述的装置，所述用于将所述数据仓库中的操作性数据以预定周期为间隔保存为快照存储的装置包括：

用于根据业务特点对于面向业务的操作性数据采取增量或全量的抽取方式的装置。