[发明专利]深度对抗度量学习方法及装置有效
| 申请号: | 201810043196.0 | 申请日: | 2018-01-17 |
| 公开(公告)号: | CN108304864B | 公开(公告)日: | 2020-07-17 |
| 发明(设计)人: | 鲁继文;周杰;段岳圻 | 申请(专利权)人: | 清华大学 |
| 主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 张润 |
| 地址: | 10008*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 深度 对抗 度量 学习方法 装置 | ||
1.一种深度对抗度量学习方法,其特征在于,包括以下步骤:
从训练集中提取出图像的深度特征并生成三元组;
根据所述三元组中的负样本通过生成器将所述三元组中的负样本转化为对度量训练有信息的难样本;以及
获取所述难样本在度量空间下的表示,并同时训练整个网络,以得到图片在度量空间下的表示;
其中,损失函数为:
其中,Jgen为对抗生成器总损失函数,Jhard为难样本约束,λ1和λ2均为平衡各约束权重参数,Jadv为对抗约束,xi为输入样本,θg为生成器网络参数,D为两样本距离,α为正负样本距离间距。
2.根据权利要求1所述的深度对抗度量学习方法,其特征在于,所述从训练集中提取出图像的深度特征并组成样本对或三元组,进一步包括:
将所述训练集传入深度卷积神经网络,并在通过特征提取网络的最后全连接层后得到图像的1024维的深度特征,并且按照样本标签根据度量使用的目标函数组织得到所述样本对或三元组。
3.根据权利要求2所述的深度对抗度量学习方法,其特征在于,所述获取所述难样本在度量空间下的表示,并同时训练整个网络,以得到图片在度量空间下的表示,进一步包括:
将生成后的样本通过度量网络得到所述在度量空间下的表示;
将所述特征提取网络、生成器网络与所述度量网络连接在一起,使得整个网络的优化目标为所述生成器的优化函数与所述度量网络的优化函数的组合;
在训练好所述整个网络后,由样本图片通过所述特征提取网络与所述度量网络得到测试样本的在度量空间下的表示。
4.根据权利要求3所述的深度对抗度量学习方法,其特征在于,所述生成器的优化函数与所述度量网络的优化函数的组合为
其中,θf为度量学习参数,J为总损失函数,Jm为度量学习损失函数,λ为平衡各约束权重参数。
5.一种深度对抗度量学习装置,其特征在于,包括:
提取模块,用于从训练集中提取出图像的深度特征并生成三元组;
转化模块,用于根据所述三元组中的负样本通过生成器将所述三元组中的负样本转化为对度量训练有信息的难样本;以及
获取模块,用于获取所述难样本在度量空间下的表示,并同时训练整个网络,以得到图片在度量空间下的表示;
其中,损失函数为:
其中,Jgen为对抗生成器总损失函数,Jhard为难样本约束,λ1和λ2均为平衡各约束权重参数,Jadv为对抗约束,xi为输入样本,θg为生成器网络参数,D为两样本距离,α为正负样本距离间距。
6.根据权利要求5所述的深度对抗度量学习装置,其特征在于,所述提取模块,进一步包括:
提取单元,用于将所述训练集传入深度卷积神经网络,并在通过特征提取网络的最后全连接层后得到图像的1024维的深度特征,并且按照样本标签根据度量使用的目标函数组织得到所述样本对或三元组。
7.根据权利要求6所述的深度对抗度量学习装置,其特征在于,所述获取模块,进一步包括:
第一获取单元,用于将生成后的样本通过度量网络得到所述在度量空间下的表示;
组合单元,用于将所述特征提取网络、生成器网络与所述度量网络连接在一起,使得整个网络的优化目标为所述生成器的优化函数与所述度量网络的优化函数的组合;
第二获取单元,用于在训练好所述整个网络后,由样本图片通过所述特征提取网络与所述度量网络得到测试样本的在度量空间下的表示。
8.根据权利要求7所述的深度对抗度量学习装置,其特征在于,所述生成器的优化函数与所述度量网络的优化函数的组合为
其中,θf为度量学习参数,J为总损失函数,Jm为度量学习损失函数,λ为平衡各约束权重参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810043196.0/1.html,转载请声明来源钻瓜专利网。





