[发明专利]数据索引构建方法及装置

说明书

本发明实施例提供一种数据索引构建方法及装置，其中，该方法包括：获取各修饰符在历史查询请求中出现的次数；遍历HBase数据表，确定所述次数超过预设阈值的各修饰符所在的数据行；为各所述数据行建立索引，形成索引表。本发明实施例提供的数据索引构建方法及装置，能够降低索引列表的内存占用率，提高数据查询效率。

技术领域

本发明实施例涉及数据库技术领域，尤其涉及一种数据索引构建方法及装置。

背景技术

HBase数据库是一种非关系型的分布式数据库模型，它基于Hadoop的分布式文件系统运行，采用列式存储数据。HBase数据表中每行有唯一的行键，也就是Rowkey，列数据通过列簇(Column Family)和其下的修饰符qualifier定义保存。所以，在HBase数据库中只有行键有索引，其他列并无索引。

目前的索引方案，都是针对数据的所有行数据，针对不同列簇，建立索引。HBase数据库是针对大数据服务的数据库，一般数据量都是百千万级、甚至上亿级，所以对所有数据行建立索引表，会耗费极大的存储空间，数据查询的速度较低。

发明内容

本发明实施例提供一种数据索引构建方法及装置，用以降低索引列表的内存占用率，提高数据查询的效率。

本发明实施例第一方面提供一种数据索引构建方法，该方法包括：

获取各修饰符在历史查询请求中出现的次数；

遍历HBase数据表，确定所述次数超过预设阈值的各修饰符所在的数据行；

为各所述数据行建立索引，形成索引表。

本发明实施例第二方面提供一种数据索引构建装置，该装置包括：

第一获取模块，用于获取各修饰符在历史查询请求中出现的次数；

第一确定模块，用于遍历HBase数据表，确定所述次数超过预设阈值的各修饰符所在的数据行；

构建模块，用于为各所述数据行建立索引，形成索引表。

本发明实施例，通过获取HBase数据表中各修饰符在历史查询请求中出现的次数，并为出现次数超过预设阈值的修饰符所在的数据行建立索引，形成索引表，从而降低了索引列表的内存占用率，提高了数据查询的效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一提供的数据索引构建方法的流程示意图；

图2为本发明实施例二提供的数据索引构建方法的流程示意图；

图3为本发明实施例三提供的数据索引构建装置的结构示意图；

图4为本发明实施例四提供的数据索引构建装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的说明书和权利要求书的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤的过程或结构的装置不必限于清楚地列出的那些结构或步骤而是可包括没有清楚地列出的或对于这些过程或装置固有的其它步骤或结构。