[发明专利]一种布隆过滤器中数据的处理方法以及布隆过滤器有效
申请号: | 201710444590.0 | 申请日: | 2017-06-13 |
公开(公告)号: | CN109145158B | 公开(公告)日: | 2021-07-20 |
发明(设计)人: | 汪漪;卢建元;刘斌 | 申请(专利权)人: | 华为技术有限公司;清华大学 |
主分类号: | G06F16/90 | 分类号: | G06F16/90;G06F16/901 |
代理公司: | 北京中博世达专利商标代理有限公司 11274 | 代理人: | 申健 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 过滤器 数据 处理 方法 以及 | ||
1.一种布隆过滤器中数据的处理方法,其特征在于,包括:
获取关键值;
利用K个不同的哈希函数对所述关键值分别作哈希运算,得到K个哈希值;
根据所述K个哈希值,计算得到K个地址,所述K个地址中每个地址与目标数据块包括的K个Word字中的一个Word一一关联,不同的地址与不同的Word关联,一个所述地址用于指示与所述一个地址关联的Word中的一个比特位;
利用第一哈希函数对所述关键值作哈希运算,以计算得到第一哈希值,所述第一哈希函数与K个哈希函数不同;
根据所述第一哈希值计算得到第一地址;
根据所述第一地址从所述布隆过滤器包括的多个数据块中确定与所述第一地址关联的目标数据块;
根据所述K个地址,设置所述每个地址在各自关联的Word中所指示的比特位上的参数,或者,读取所述每个地址在各自关联的Word中所指示的比特位上的参数,以根据读取的参数确定所述关键值是否属于所述布隆过滤器。
2.根据权利要求1所述的方法,其特征在于,所述根据所述K个地址,设置所述每个地址在各自关联的Word中所指示的比特位上的参数,包括:
对所述目标数据块包括的K个Word中每个Word包括的比特位,执行下述步骤以设置每个Word包括的一个比特位的参数:
将所述K个地址中一个地址关联的Word中该地址所指示的比特位的参数设置为第一参数。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述K个地址,读取所述每个地址在各自关联的Word中所指示的比特位上的参数,并根据读取的参数确定所述关键值是否属于所述布隆过滤器,包括:
根据所述K个地址,从所述目标数据块包括的K个Word中读取所述K个地址中每个地址在各自所关联的Word中所指示的比特位上的参数;
确定所述K个地址在各自关联的Word中所指示的比特位上的参数均为第一参数,则确定所述关键值属于所述布隆过滤器。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
确定所述K个地址中每个地址在各自关联的Word中所指示的比特位中存在至少一个比特位上的参数为第二参数,则确定所述关键值不属于所述布隆过滤器,所述第二参数与所述第一参数不同。
5.根据权利要求1-2、4任一项所述的方法,其特征在于,所述布隆过滤器包括至少一个数据块,所述至少一个数据块中每个数据块包括K个地址连续且独立的Word字,所述K个Word中每个Word包括w个比特位,所述w为大于或等于1的整数。
6.根据权利要求1-2、4任一项所述的方法,其特征在于,所述利用K个不同的哈希函数对所述关键值分别作哈希运算,计算得到K个哈希值,包括:
利用K个哈希计算单元分别对所述关键值作并行哈希函数计算,以获得K个哈希值,一个哈希计算单元用于根据所述关键值获得一个哈希值。
7.根据权利要求1-2、4任一项所述的方法,其特征在于,所述根据所述K个哈希值,计算得到K个地址,包括:
根据所述K个哈希值,利用K个地址计算单元并行计算,以计算得到K个地址。
8.根据权利要求1-2、4任一项所述的方法,其特征在于,所述根据所述K个地址,设置所述K个地址中每个地址在各自关联的Word中所指示的比特位上的参数,包括:
根据所述K个地址,并行设置所述K个地址中每个地址在各自关联的Word中所指示的比特位上的参数,
或者,读取所述中每个地址在各自关联的Word中所指示的比特位上的参数,并根据读取的参数确定所述关键值是否属于所述布隆过滤器,包括:
根据所述K个地址,并行读取所述K个地址中每个地址在各自关联的Word中所指示的比特位上的参数;
在确定所述K个地址中每个地址在各自关联的Word中所指示的比特位上的参数均为第一参数时,则确定所述关键值属于所述布隆过滤器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司;清华大学,未经华为技术有限公司;清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710444590.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种云数据库的数据转换方法
- 下一篇:一种对数据进行处理的方法和装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置