[发明专利]一种利用弱监督区域推荐的车辆重识别方法有效
申请号: | 202110566479.5 | 申请日: | 2021-05-24 |
公开(公告)号: | CN113177518B | 公开(公告)日: | 2023-04-28 |
发明(设计)人: | 徐胜军;叶松涛;孟月波;刘光辉;韩九强;史亚;王艳;刘求緣;郝明;詹博涵;邓博文 | 申请(专利权)人: | 西安建筑科技大学 |
主分类号: | G06V20/54 | 分类号: | G06V20/54;G06V10/774;G06V10/764;G06V10/82;G08G1/017 |
代理公司: | 西安通大专利代理有限责任公司 61200 | 代理人: | 高博 |
地址: | 710055 陕*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 利用 监督 区域 推荐 车辆 识别 方法 | ||
1.一种利用弱监督区域推荐的车辆重识别方法,其特征在于,包括以下步骤:
S1、获取车辆图像数据,并将车辆图像数据设置为同一大小,分别构建车辆重识别训练集T、查询集Q与图库集G,对车辆重识别训练集T进行裁剪、翻转、旋转和归一化数据增强操作;
S2、设计弱监督区域推荐网络模型结构,包括骨干网络,全局分支网络和局部分支网络,采用批量训练方法将步骤S1得到的车辆重识别训练集T输入骨干网络中获取特征映射Fi,将特征映射Fi输入至全局分支网络和局部分支网络,获取全局特征和多尺度局部特征;
构建局部分支网络具体为:
构建局部区域推荐模块用于获取车辆图像中具有辨识度的局部特征,局部区域推荐模块包含具有三层特征金字塔结构的卷积层,通过对特征映射Fi进行连续的空间下采样,获取目标车辆在不同空间分辨率的多尺度特征;利用滑动窗口在多尺度特征上生成不同大小和长宽比的锚框;设计两层卷积层用于计算锚框所提取的区域特征的信息量I,并使用非极大值抑制技术剔除相互覆盖的区域;按照信息量大小对区域特征进行排序,提取出前3个信息最大的区域其对应的信息量分别为对Fi按照区域执行感兴趣区域对齐池化,获取3个区域不同的细粒度局部特征进行融合以获取多尺度局部特征使用局部三元组损失L(flA,flN,flP)进行约束,分别增加一个批量归一化层BN(·)、一个线性层W和一个softmax层用于获取分类置信度并计算分类损失确保获取到的信息量大的区域是车辆图像的关键性区域,设计区域建议损失函数L(I,C)对其进行约束,区域建议损失函数L(I,C)为:
L(I,C)=∑f(Is-Ii)
其中,函数f(x)=max(1-x,0),Is为第s个区域的信息量,Ii为第i个区域的信息量;
S3、将步骤S1获取的车辆训练集T输入步骤S2设计的弱监督区域推荐网络模型结构中,使用适应性梯度下降算法以端到端的方式监督弱监督区域推荐网络模型结构的训练,得到训练好的弱监督区域推荐网络模型;
S4、将步骤S1获取的车辆查询集Q与图库集G输入步骤S3训练好的弱监督区域推荐网络模型,提取车辆的全局特征与局部特征,通过拼接融合的方式获取最终的特征,计算车辆查询集Q和图库集G的特征之间的余弦相似度,根据相似度大小获取车辆重识别结果。
2.根据权利要求1所述的方法,其特征在于,步骤S1中,获取多段车辆监控视频;使用预先训练的车辆检测器定位并裁剪监控视频中的车辆图像;使用人工标注方法将车辆图像中同一车辆标注为独立的标签,循环获取车辆数据集,将获取的车辆数据集划分为训练集T、查询集Q与图库集G。
3.根据权利要求1所述的方法,其特征在于,步骤S2中,构建全局分支网络具体为:
使用全局平均值池化操作对特征映射Fi在长度和宽度方向上求平均值,在压缩特征分辨率的同时保留车辆的整体信息,得到全局特征描述符然后设计一个批量归一化层BN(·)、一个线性层W和一个softmax层用于获取特征的分类结果pg;最后使用全局三元组损失和全局分类损失对全局分支进行约束。
4.根据权利要求3所述的方法,其特征在于,全局三元组损失具体为:
将一个批量B中的图像组成三元组IA,IN,IP输入至全局分支,获取其全局特征描述符后计算三元组损失:
其中,分别表示组成三元组的源样本、负样本和正样本的全局特征向量,和分别代表正样本对和负样本对的欧式距离,m代表三元组损失的间距阈值,[·]+代表取正值。
5.根据权利要求3所述的方法,其特征在于,全局分类损失具体为:
其中,pg为分类结果预测值,为分类结果真值,n为批量大小。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安建筑科技大学,未经西安建筑科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110566479.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电磁工具箱
- 下一篇:一种锂电池负极材料石墨坩埚的成型装置及加工方法