[发明专利]一种基于分片存储和折半索引的数据查询引擎有效
申请号: | 201910096153.3 | 申请日: | 2019-01-31 |
公开(公告)号: | CN109840245B | 公开(公告)日: | 2020-12-18 |
发明(设计)人: | 段俊辉;朱永超;张杨杨;徐受天 | 申请(专利权)人: | 中铁工程装备集团有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/14;H04L9/06 |
代理公司: | 郑州优盾知识产权代理有限公司 41125 | 代理人: | 谢萍 |
地址: | 450016 河南省*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于分片存储和折半索引的数据查询引擎,包括数据生成模块、数据排序模块、数据查询模块。本发明将各种明文数据基于GPU运算存放于特定的文件下;并将每个文件内的数据进行动态排序,基于每行明文数据MD5值的21至24位倒序后从小到大排序;最后基于折半索引查询特定MD5加密数据对应的明文数据。本发明首先有效缓解了数据库数据存储压力,仅需要存储明文,而非原始存储方法采用的明文和MD5同时存储的方式;同时基于分片技术提升文件生成以及数据存储的高效性;再者基于折半查询算法大幅提升文件内容快速定位查询速度,充分展现折半查询算法在数据量越多的情况下查询速度越快的优势。 | ||
搜索关键词: | 一种 基于 分片 存储 折半 索引 数据 查询 引擎 | ||
【主权项】:
1.一种基于分片存储和折半索引的数据查询引擎,其特征在于,包括数据生成模块、数据排序模块、数据查询模块;其中,所述数据生成模块,用于将各个MD5加密数据的明文通过分片存放的形式生成于各个文件中;所述数据排序模块,对每个文件夹下的明文数据从小到大依次排序;所述数据查询模块,基于给定的MD5加密数据进行反向明文查询,并将查询结果输出。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中铁工程装备集团有限公司,未经中铁工程装备集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910096153.3/,转载请声明来源钻瓜专利网。