[发明专利]一种索引构建方法、数据读取方法及索引构建装置在审
申请号: | 202211502941.6 | 申请日: | 2022-11-28 |
公开(公告)号: | CN115718819A | 公开(公告)日: | 2023-02-28 |
发明(设计)人: | 柴云鹏;骆远辉;王元桢 | 申请(专利权)人: | 中国人民大学 |
主分类号: | G06F16/901 | 分类号: | G06F16/901;G06F16/903 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 彭星 |
地址: | 100089 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 索引 构建 方法 数据 读取 装置 | ||
1.一种索引构建方法,其特征在于,包括:
将初始数据输入前缀树的第一目标节点,根据所述初始数据和所述第一目标节点的预设空间放大率阈值,确定出所述第一目标节点的目标前缀长度;
根据第一目标节点的目标前缀长度,将所述初始数据划分为多个子数据集,和/或从初始数据中筛选出存储在所述第一目标节点的待存储数据;其中,所述子数据集中的初始数据具有相同的节点前缀;
根据节点前缀和/或待存储数据确定出第一目标节点的索引模型,并通过所述索引模型分别计算每一子数据集的节点前缀对应的指向子节点的指针以及存储位置,和/或分别计算每一待存储数据的存储位置;
将每一节点前缀和指向子节点的指针、和/或每一待存储数据存储在对应的存储位置,构建出所述第一目标节点的索引结构;
将构建好的第一目标节点的子节点作为新的第一目标节点,将子节点对应子数据集作为新的初始数据,构建所述新的第一目标节点的索引结构,直至满足构建完成条件,构建出整个索引。
2.根据权利要求1所述的索引构建方法,其特征在于,根据所述初始数据和所述第一目标节点的预设空间放大率阈值,确定出所述第一目标节点的目标前缀长度,包括:
根据所述初始数据的数据分布特征确定出至少一个待验证前缀长度;
分别计算每一个待验证的前缀长度对应的空间放大率;
筛选出对应的空间放大率不大于第一目标节点的预设空间放大率阈值的待验证前缀长度;
确定筛选出的最大的待验证前缀长度作为目标前缀长度。
3.根据权利要求1所述的索引构建方法,其特征在于,根据节点前缀和/或待存储数据确定出第一目标节点的索引模型,包括:
根据节点前缀和/或待存储数据,计算出满足预设空间放大率阈值的目标全局斜率;
根据计算出的目标全局斜率,确定一线性模型作为索引模型。
4.根据权利要求1所述的索引构建方法,其特征在于,在构建出整个索引之后,所述方法还包括:
在构建好的索引中插入新的数据时,判断新的数据映射的第二目标节点的目标槽位是否满足预设调整条件;
若是,则根据包括所述新的数据的第二目标节点的数据,通过预先配置的调整策略调整所述第二目标节点的索引结构。
5.根据权利要求4所述的索引构建方法,其特征在于:根据包括所述新的数据的第二目标节点的数据,调整所述第二目标节点的索引结构,包括:
调整所述第二目标节点的空间放大率,以扩大第二目标节点的存储空间;
或者,根据包括所述新的数据的第二目标节点的数据,重新确定第二目标节点的索引模型;
或者,将第二目标节点的数据槽位的键值对、指针槽位的节点前缀和指针组成的键值对作为第二目标节点的初始数据;
根据所述第二目标节点的初始数据和预设空间放大率阈值,重新确定出所述第二目标节点的目标前缀长度和索引模型,以重新构建第二目标节点的索引结构。
6.根据权利要求4所述的索引构建方法,其特征在于,所述预设调整条件至少为以下之一:第二目标节点的满载率到达预设满载率阈值;新的数据映射的第二目标节点的目标槽位为数据槽位;新的数据映射的第二目标节点的目标槽位为指针槽位,且新的数据与指针槽位指向的子节点的最长公共前缀不匹配。
7.根据权利要求1所述的索引构建方法,其特征在于,当第一目标节点的子节点与第一目标节点的节点前缀之差小于预设长度阈值时,第一目标节点的子节点采用ART结点。
8.一种数据读取方法,其特征在于,应用于通过权利要求1-7所述索引构建方法构建的索引;所述读取方法包括:
从索引的根节点出发,判断当前节点的节点前缀与待读取数据是否匹配;
若匹配,则通过当前节点中的索引模型,计算所述待读取数据的目标槽位;
若所述目标槽位为数据槽位,则判断所述数据槽位中的数据与待读取数据是否匹配,若匹配则返回所述数据槽位中的数据;
若所述目标槽位为指针槽位,则在所述指针槽位指向的子节点中查询所述待读取数据,直至返回读取结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民大学,未经中国人民大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211502941.6/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置