[发明专利]列式存储数据的组织方法、装置及存储介质

权利要求书

1.一种列式存储数据的组织方法，其特征在于，包括：

创建列式存储格式的第一组织文件，所述第一组织文件中包括一个行组；

获取多个列式存储格式的待拼接文件的数据；

将所述待拼接文件的数据，采用重编码组织方式在所述第一组织文件的所述一个行组中进行拼接；

其中，所述获取多个列式存储格式的待拼接文件的数据，包括：将所述待拼接文件的数据读入内存；

其中，将所述待拼接文件的数据，采用重编码组织方式在所述第一组织文件的所述一个行组中进行拼接，包括：从内存中调取所述待拼接文件的数据，并将所述待拼接文件的数据在所述第一组织文件的所述一个行组中进行拼接。

2.根据权利要求1所述的方法，其特征在于，获取多个列式存储格式的待拼接文件的数据之前，还包括：

创建列式存储格式的第二组织文件，所述第二组织文件中包括多个行组。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

将所述待拼接文件的数据，采用二进制流组织方式在所述第二组织文件中进行拼接；

在所述第二组织文件拼接完成后，利用所述第二组织文件作为查询文件；

在所述第一组织文件拼接完成后，利用所述第一组织文件替换所述第二组织文件作为查询文件。

4.根据权利要求3所述的方法，其特征在于，

将所述待拼接文件的数据，采用二进制流组织方式在所述第二组织文件中进行拼接，包括：从内存中调取所述待拼接文件的数据，并将所述待拼接文件的数据在所述第二组织文件中进行拼接。

5.根据权利要求3所述的方法，其特征在于，将多个所述待拼接文件的数据，采用二进制流组织方式在所述第二组织文件中进行拼接，包括：

读取所述待拼接文件的行组，并将所述待拼接文件的行组追加到所述第二组织文件的行组中；

更新所述第二组织文件中的底部数据。

6.根据权利要求5所述的方法，其特征在于，更新所述第二组织文件中的底部数据，包括：

读取所述待拼接文件的底部数据中的元数据，将所述元数据追加到所述第二组织文件的底部数据的元数据中；

更新追加的元数据中的偏移量信息；

更新所述第二组织文件的底部数据的长度信息。

7.根据权利要求3所述的方法，其特征在于，还包括：

在拼接后的组织文件大于预先设置的文件大小阈值的情况下，重新创建一个列式存储格式的组织文件，用于对所述待拼接文件进行拼接，其中，所述组织文件包括所述第一组织文件和/或所述第二组织文件。

8.一种列式存储数据的组织装置，其特征在于，包括：

第一创建单元，用于创建列式存储格式的第一组织文件，所述第一组织文件中包括一个行组；

获取单元，用于获取多个列式存储格式的待拼接文件的数据；

第一拼接单元，用于将所述待拼接文件的数据，采用重编码组织方式在所述第一组织文件的所述一个行组中进行拼接；

其中，所述获取单元还用于：将所述待拼接文件的数据读入内存；

所述第一拼接单元还用于：从内存中调取所述待拼接文件的数据，并将所述待拼接文件的数据在所述第一组织文件的所述一个行组中进行拼接。

9.根据权利要求8所述的装置，其特征在于，还包括：

第二创建单元，用于创建列式存储格式的第二组织文件，所述第二组织文件中包括多个行组。