[发明专利]一种基于索引表的查询的方法及设备有效
申请号: | 201710138728.4 | 申请日: | 2017-03-09 |
公开(公告)号: | CN106940715B | 公开(公告)日: | 2019-11-15 |
发明(设计)人: | 张常淳;周立;吕程;周翠翠 | 申请(专利权)人: | 星环信息科技(上海)有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/22 |
代理公司: | 31243 上海百一领御专利代理事务所(普通合伙) | 代理人: | 佘猛;邵栋<国际申请>=<国际公布>=< |
地址: | 200233上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 索引 查询 方法 设备 | ||
本申请的目的是提供一种基于索引表的查询的方法及设备,本申请通过根据用户的查询请求判断所述索引列的值是否为确定值,进而选择对应的索引表,根据所述索引表对应的元信息将所确定的从节点上的索引文件的位置信息发送至所述从节点,并根据所述数据表的元信息将所确定的从节点上的数据文件的位置信息发送至所述从节点。在从节点端,根据所述主节点发送的数据表的元信息中数据文件的位置信息,判断所述从节点中是否存在用户查询请求对应的数据文件,若是,则根据所述索引文件的信息获取所述数据文件,从而满足用户不同的筛选条件,有效地筛选出满足条件的数据文件,大大减少了查询时的数据读取量,缩短查询时间、提高了数据查询的效率。
技术领域
本申请涉及计算机领域,尤其涉及一种基于索引表的查询的方法及设备。
背景技术
随着数据库技术的发展和应用,数据库存储的数据量与日俱增,同时快速、灵活地进行大数据量的复杂查询处理也成为新的需求。OLAP(On-Line Analytical Processing,联机分析处理),专门用于支持复杂的分析操作,侧重对决策人员和高层管理人员的决策支持。通常状况下,OLAP用户只需要查询少数的几个数据列,利用行式存储会加载很多无用的数据列,导致查询性能下降。分布式列式存储的基本查询方法首先从zookeeper中读取元信息,进而去集群中各个机器读取所有的数据文件,进而从每个数据文件中读取满足条件的记录,此方式直接导致数据访问量过大,影响了OLAP的查询性能。
本申请的一个目的是提供一种基于索引表的查询的方法及设备,解决现有技术中查询数据时数据访问量过大,影响联机分析处理的查询性能的问题。
根据本申请的一个方面,提供了一种在主节点端基于索引表的查询的方法,所述方法包括:
根据用户的查询请求通过索引表的数据结构查找所述索引表的索引列,并判断所述索引列的值是否为确定值,得到判断结果;
根据所述判断结果确定所述索引表的类型;
通过所述索引表的类型确定所述索引表对应的索引文件所在的从节点;
根据所述索引表对应的元信息将所确定的从节点上的索引文件的位置信息发送至所述从节点,并根据所述数据表的元信息将所确定的从节点上的数据文件的位置信息发送至所述从节点。
进一步地,所述索引表的数据结构中索引文件的结构包括BPlusTree结构。
进一步地,所述BPlusTree结构包括叶子节点的键值和位置信息值,其中,所述键值根据所述索引表的索引列的值确定,
所述位置信息值根据所述索引列所属数据文件的文件名及所述索引列所在的行在所述数据文件中的偏移量确定。
根据本申请另一个方面,提供了一种在从节点端基于索引表的查询的方法,所述方法包括:
根据主节点发送的索引文件的位置信息通过索引文件的数据结构确定所述索引文件所在索引表中的索引列的值;
根据所述索引列的值获取所述索引表中所述索引文件的信息;
根据所述主节点发送的数据表的元信息中数据文件的位置信息,判断所述从节点中是否存在用户查询请求对应的数据文件,若是,则根据所述索引文件的信息获取所述数据文件。
进一步地,所述索引文件的信息包括所述索引文件的数据结构中的键值及位置信息值时,根据所述索引列的值获取所述索引表中所述索引文件的信息,包括:
根据所述索引列的值确定所述索引文件的数据结构中所述索引列的值对应的键值;
根据所述索引列的值对应的键值获取所述索引文件的数据结构中位置信息值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于星环信息科技(上海)有限公司,未经星环信息科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710138728.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:省料省力涂料桶
- 下一篇:一种数据处理方法、装置及系统