[发明专利]一种面向高维大数据集的加权量化哈希检索方法有效
申请号: | 201811316883.1 | 申请日: | 2018-11-07 |
公开(公告)号: | CN109634953B | 公开(公告)日: | 2021-08-17 |
发明(设计)人: | 孙瑶;钱江波;胡伟;任艳多 | 申请(专利权)人: | 宁波大学 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2458;G06K9/62 |
代理公司: | 宁波奥圣专利代理有限公司 33226 | 代理人: | 程天鹏 |
地址: | 315211 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 面向 高维大 数据 加权 量化 检索 方法 | ||
1.一种面向高维大数据集的加权量化哈希检索方法,其特征在于包括以下步骤:
步骤①:获取由n个原始高维数据组成的原始高维数据集X并给定查询数据q,X为n×d维的矩阵,q为1×d维的向量,使用主成份分析算法对X进行降维,得到与X对应的低维向量集V,其中,V为n×c维的矩阵,c<d,vij表示原始高维数据中第i个数据第j维度在V中对应的低维向量元素,1≤i≤n,1≤j≤c,再使用主成份分析算法对q进行降维,得到与q对应的1×c维的低维向量q′;
步骤②:通过迭代获取最终二进制编码矩阵B″和最终权重矩阵W″,具体过程如下:
步骤②-1:设定最大迭代次数,随机给定初始二进制编码矩阵B,B∈{-1,1}n×c,随机给定初始权重矩阵W,W=diag(w1,w2,...,wj,...,wc),其中,wj表示第j维度的维度权重,diag()表示对角矩阵;
步骤②-2:根据哈希函数构造原理中的成对保相似性原则构造损失函数,再引入完全正交约束条件,将完全正交约束条件进行松弛化操作,从而构造出损失函数其中,|| ||F为取矩阵的F-范数符号,中的2为平方符号,BT表示B的转置矩阵,I表示单位矩阵;
步骤②-3:开始迭代过程,在当前一次迭代过程中,首先保持W不变,对进行最小化求解,利用梯度下降法对B进行更新,将最小时更新得到的B记为B′,bij表示X中第i个原始高维数据第j维度的元素在当前一次迭代过程中对应的更新后的二进制编码值;
再保持B′不变,通过对进行最小化求解对W进行更新,将最小时更新得到的W记为W′;
步骤②-4:判断当前迭代过程的迭代次数是否达到设定的最大迭代次数,若未达到最大迭代次数,则令W=W′,B=B′,返回步骤②-3开始下一次迭代过程,同时迭代次数加1,其中W=W′和B=B′中的“=”为赋值符号;若达到最大迭代次数,则将当前一次迭代过程中更新得到的W′作为最终权重矩阵W″,将当前一次迭代过程中更新得到的B′作为最终二进制编码矩阵B″;
步骤③:根据W″对B″中每个元素进行加权量化,获得加权后的二进制编码矩阵Z;
步骤④:根据W″和B″,获取最小时的q′,作为与q′对应的二进制编码q″,在Z中查找与q″的加权海明距离最近的行向量数据,将与q″的加权海明距离最近的行向量数据对应的原始高维数据作为最终的最近邻查询结果,完成对q的哈希检索过程。
2.根据权利要求1所述的一种面向高维大数据集的加权量化哈希检索方法,其特征在于所述的步骤②-1中设定的最大迭代次数为50次。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于宁波大学,未经宁波大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811316883.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置