[发明专利]字符串类型列的压缩处理方法及装置

说明书

技术领域

本发明涉及数据处理领域，具体而言，涉及一种字符串类型列的压缩处理方法及装置。

背景技术

在数据库存储技术中，列存储索引即是按照列进行存储。列存储索引的好处是能将数据库的性能大幅提升，并且按列存储压缩技术使得空间使用大幅降低。

列存储通过将同一列的数据存储在一起，可以最大限度的使用重复数据，进行压缩。在数据库中，不同类型的数据，对于压缩的效率也有很大的影响。字符串类型由于其长度的可变以及字符串自身对空间占用比较大，对于压缩而言不是很友好。因此压缩处理效率低。

针对现有技术中对于字符串类型的列压缩处理效率低的问题，目前尚未提出有效的解决方案。

发明内容

本发明的主要目的在于提供一种字符串类型列的压缩处理方法及装置，以解决现有技术中对于字符串类型的列压缩处理效率低的问题。

为了实现上述目的，根据本发明的一个方面，提供了一种字符串类型列的压缩处理方法。

根据本发明的字符串类型列的压缩处理方法包括：确定待压缩处理数据表；确定待压缩处理数据表中的字符串列，其中，字符串列为待压缩处理数据表中为字符串类型的列；确定字符串列中字符串值对应的键值，其中，键值为数据类型的值；将字符串列中字符串值替换为与字符串列中字符串值对应的键值；获取第一存储索引，其中，第一存储索引为根据字符串列中字符串值对应的键值创建的对应的索引；以及根据第一存储索引对待压缩处理数据表进行压缩处理。

进一步地，在将字符串列中字符串值替换为与字符串列中字符串值对应的键值之后，以及在获取第一存储索引之前，该方法还包括：在将字符串列中字符串值替换为与字符串列中字符串值对应的键值之后，获取替换后的键值；以及根据替换后的键值生成第一数据表，其中，第一数据表为存储有替换后的键值和待压缩处理数据表中除去字符串列之外的数据表。

进一步地，在确定字符串列中字符串值对应的键值之后，以及在将字符串列中字符串值替换为与字符串列中字符串值对应的键值之前，该方法还包括：创建第二数据表，其中，第二数据表用于存储字符串列中字符串值和字符串列中字符串值对应的键值的数据表，在根据第一存储索引对字符串列进行压缩处理之后，该方法还包括：创建第一视图，其中，第一视图为连接第一数据表和第二数据表的视图；以及根据第一视图显示数据信息。

进一步地，根据第一视图显示数据信息之后，该方法还包括：获取待查询数据；接收查询指令，其中，查询指令为用于指示查询的指令；以及根据查询指令在第一视图中对待查询数据执行查询操作。

进一步地，获取第一存储索引包括：确定字符串列中字符串值对应的第二存储索引；根据字符串列中字符串值对应的键值创建对应的索引；以及根据字符串列中字符串值对应的键值对应的索引替换第二存储索引，得到第一存储索引。

为了实现上述目的，根据本发明的另一方面，提供了一种字符串类型列的压缩处理装置。

根据本发明的字符串类型列的压缩处理装置包括：第一确定单元，用于确定待压缩处理数据表；第二确定单元，用于确定待压缩处理数据表中的字符串列，其中，字符串列为待压缩处理数据表中为字符串类型的列；第三确定单元，用于确定字符串列中字符串值对应的键值，其中，键值为数据类型的值；替换单元，用于将字符串列中字符串值替换为与字符串列中字符串值对应的键值；第一获取单元，用于获取第一存储索引，其中，第一存储索引为根据字符串列中字符串值对应的键值创建的对应的索引；以及压缩处理单元，用于根据第一存储索引对待压缩处理数据表进行压缩处理。

进一步地，该装置还包括：第二获取单元，用于在将字符串列中字符串值替换为与字符串列中字符串值对应的键值之后，获取替换后的键值；以及生成单元，用于根据替换后的键值生成第一数据表，其中，第一数据表为存储有替换后的键值和待压缩处理数据表中除去字符串列之外的数据表。

进一步地，该装置还包括：第一创建单元，用于创建第二数据表，其中，第二数据表用于存储字符串列中字符串值和字符串列中字符串值对应的键值的数据表，第二创建单元，用于创建第一视图，其中，第一视图为连接第一数据表和第二数据表的视图；以及显示单元，用于根据第一视图显示数据信息。

进一步地，该装置还包括：第三获取单元，用于获取待查询数据；接收单元，用于接收查询指令，其中，查询指令为用于指示查询的指令；以及查询单元，用于根据查询指令在第一视图中对待查询数据执行查询操作。