[发明专利]一种基于多通道注意力特征的行人重识别方法有效

专利信息
申请号: 201910355717.0 申请日: 2019-04-29
公开(公告)号: CN110110642B 公开(公告)日: 2020-12-22
发明(设计)人: 周智恒;陈增群;李波 申请(专利权)人: 华南理工大学
主分类号: G06K9/00 分类号: G06K9/00;G06K9/62;G06N3/04
代理公司: 广州市华学知识产权代理有限公司 44245 代理人: 李斌
地址: 510640 广*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 通道 注意力 特征 行人 识别 方法
【权利要求书】:

1.一种基于多通道注意力特征的行人重识别方法,其特征在于,所述的行人重识别方法包括如下步骤:

S1、构建基于通道注意力的卷积神经网络模型,并预训练主干网络;

S2、提取行人图片在主干网络的输出特征,全局池化后计算特征的通道加权向量;

S3、加权向量与主干网络的输出特征相乘,计算结果再与主干网络的输出特征相加,以残差的方式提取通道注意力特征;

S4、重复提取多个注意力特征,采用海林格距离进行特征多样性正则化;

S5、将注意力特征输入全连接层与分类器,训练最小化交叉熵损失和度量损失;

S6、将目标测试集图片输入训练好的模型提取特征,根据特征相似度进行排序得到行人重识别结果,进而实现行人重识别。

2.根据权利要求1所述的一种基于多通道注意力特征的行人重识别方法,其特征在于,所述的卷积神经网络模型中主干网络采用Resnet网络,将Resnet网络在ImageNet数据集上进行预训练,使Resnet网络获得理想的初始值。

3.根据权利要求1所述的一种基于多通道注意力特征的行人重识别方法,其特征在于,所述的步骤S2过程如下:

S2.1、定义主干网络的输出特征为U=[u1,...,uC]∈RW×H×C,通过全局池化聚合空间信息得到通道描述子z=[z1,...,zC]∈RC,全局池化表示为:

S2.2、基于通道描述子计算特征的通道加权向量,加权向量表示为:

其中p=1,...,P表示有多个通道加权向量,为第一个全连接层的参数,为第二个全连接层的参数,r为降维比例常数,δ为ReLU函数,σ为Sigmoid函数。

4.根据权利要求3所述的一种基于多通道注意力特征的行人重识别方法,其特征在于,所述的步骤S3过程如下:

将加权向量mp与主干网络的输出特征U相乘得到注意力特征图Sp,计算公式表示为:

将注意力特征图Sp与主干网络的输出特征U相加以增加全局信息,得到通道注意力特征Up,计算公式表示为:

Up=γ·U+Sp

其中γ为比例常数。

5.根据权利要求1所述的一种基于多通道注意力特征的行人重识别方法,其特征在于,所述的步骤S4过程如下:

定义图像In输入网络得到的通道加权矩阵为:

其中表示图像In输入网络得到的第P个通道加权向量,将海林格距离的公式表示为:

其中为第i个通道加权向量的第c个元素,由于计算通道加权向量采用softmax函数,因此则:

将最大化海林格距离等效为最小化令则度量不同注意力显著性区域重叠性的正则项表示为:

其中||·||F表示弗罗贝尼乌斯范数。

6.根据权利要求1所述的一种基于多通道注意力特征的行人重识别方法,其特征在于,所述的步骤S5过程如下:

记模型输入的锚点样本为Ii,正样本为Ij,负样本为Ik,分别记三个样本的标签为yi、yj、yk,f(I)为网络分类器前最后一层全连接层的输出特征,三元度量损失和交叉熵损失分别表示为:

其中θ为卷积神经网络模型的参数,m为卷积神经网络模型收敛时负样本对之间距离与正样本对之间距离的目标差值,pi为输入图像经过卷积神经网络模型分类后的概率值;

将目标优化函数表示为:

其中λ为比例常数; 通过最小化目标函数Ltotal(θ),迭代优化卷积神经网络模型至收敛。

7.根据权利要求1所述的一种基于多通道注意力特征的行人重识别方法,其特征在于,所述的步骤S6过程如下:

将目标测试集图片输入卷积神经网络模型,提取分类器前最后一全连接层的特征,联接P个特征,计算联接后特征之间的欧氏距离构建相似度矩阵,根据距离大小进行排序得到检索候选列结果。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南理工大学,未经华南理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910355717.0/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top