[发明专利]一种有监督深度哈希快速图片检索方法及系统有效

专利信息
申请号: 201710555687.9 申请日: 2017-07-10
公开(公告)号: CN107423376B 公开(公告)日: 2019-12-27
发明(设计)人: 王延峰;周越夫;黄衫衫;张娅 申请(专利权)人: 上海媒智科技有限公司
主分类号: G06F16/53 分类号: G06F16/53;G06N3/04;G06N3/08
代理公司: 31317 上海恒慧知识产权代理事务所(特殊普通合伙) 代理人: 徐红银
地址: 200030 上海市*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 监督 深度 快速 图片 检索 方法 系统
【权利要求书】:

1.一种有监督深度哈希快速图片检索方法,其特征在于,包括:

S1:构建用于快速图像检索的深度卷积神经网络H″;

对于每张图片a,随机分配一张相似图片p与一张非相似图片n,构成一组三元组训练样本(a,p,n);

在已有的深度神经网络模型末端叠加低维哈希层,构成深度卷积神经网络H,深度卷积神经网络H经过三次复制得到三路并行且参数共享的深度卷积神经网络H′;

将所述三元组训练样本(a,p,n)输入到深度卷积神经网络H′开始训练,同时对该训练样本进行缩放与裁剪;

先采用优化三元组损失函数训练深度卷积神经网络H′,以梯度回传的方式对深度卷积神经网络H′进行网络参数的更新;

再采用优化三元组量化损失函数微调深度卷积神经网络H′,以梯度回传的方式对深度卷积神经网络H′进行网络参数的更新;

以上训练微调后的深度卷积神经网络H′中任意抽取一路网络即用于快速图像检索的深度卷积神经网络H″;

S2:将图库中的图片依次输入深度卷积神经网络H″后得到实值特征,经过量化操作后得到哈希码并储存在本地;

S3:将每一张查询图片q输入至深度卷积神经网络H″并量化得到哈希码h(q),再计算哈希码h(q)与所有存储在本地的哈希码之间的汉明距离,将汉明距离为小的认作相似度为高,以此进行排序,最终根据检索数量要求返回相应数量的最为相似的图片;

所述S1,采用优化三元组量化损失函数微调深度卷积神经网络H′,以梯度回传的方式对深度卷积神经网络H′进行网络参数的更新,是指:

步骤Sc1,三元组训练样本(a,p,n)经过深度卷积神经网络H′,得到三元组训练样本中的每张图片所对应的实值特征fa,fp,fn

步骤Sc2,计算三元组量化损失函数,向网络H′反向传播梯度以更新网络参数,其中:

所述三元组量化损失函数lossQ(fa,fp,fn)为:

其中αs用于控制相似图片的特征距离0.5的远近,αd用于控制非相似图片间特征的距离,δ用于控制非相似图片间每个维度上的距离,β与γ用于平衡两项;

在步骤Sc2中:

利用三元组量化损失函数,使得相似图片a与p各维度特征值都同时大于设定阈值或同时小于设定阈值,促使通过门槛函数后各维度的哈希码值相同;同时控制非相似图片a与n之间距离足够大,促使通过门槛函数后存在部分维度上两者的哈希码值不同。

2.根据权利要求1所述的有监督深度哈希快速图片检索方法,其特征在于,所述S1中,三元组训练样本(a,p,n)按照如下操作得到:

对于基准图片a,根据标签分配相似图片p与非相似图片n,其中标签相同则为相似图片,不相同则为非相似图片,构成三元组训练样本(a,p,n);每一张图片都作为基准图片并进行多次如上操作,每一组三元组训练样本都与其他组的成员不完全相同。

3.根据权利要求1所述的有监督深度哈希快速图片检索方法,其特征在于,所述S1中,深度卷积神经网络H′按照如下步骤得到:

步骤Sa1,参考已有的深度卷积神经网络,省去网络末端损失层,形成可输出多维实值特征的结构;

步骤Sa2,构建低维的全连接层,配以激活函数后作为低维哈希层,并接在步骤S21得到的网络末端,得到深度卷积神经网络H;

步骤Sa3,复制三次深度卷积神经网络H,并行排列并设置为参数共享,构成深度卷积神经网络H′。

4.根据权利要求3所述的有监督深度哈希快速图片检索方法,其特征在于,步骤Sa2中,构建的全连接层中神经元的个数等于最终要求输出的哈希码比特数。

5.根据权利要求1所述的有监督深度哈希快速图片检索方法,其特征在于,所述S1中,所述对该训练样本进行缩放与裁剪,是指:

将三元组训练样本(a,p,n)缩放至256像素×256像素,从中随机裁取227像素×227像素大小的部分。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海媒智科技有限公司,未经上海媒智科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710555687.9/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top