[发明专利]一种基于不确定性联合注意力的人的重识别方法及系统

说明书

本发明公开了一种基于不确定性联合注意力的人的重识别方法及系统，应用于人体识别技术领域。方法包括以下步骤：S1、提取输入图像的全局特征，空间特征和关键点特征；S2、对关键点特征和空间特征进行联合学习，得到联合特征；S3、构建联合特征与上下文信息的关系特征，得到上下文关系特征。本发明设计了一种上下文关系网络，使同一个体的所有局部特征均包含上下文关系特征，解决了当不同个体的局部特征具有相似属性时，会混淆个体间局部特征而出现误识别的问题；抛弃得分较低的像素区域，并与相应的局部空间特征进行联合，增强局部特征的可信度，能够获得更具显著性的局部特征。

技术领域

本发明涉及人体识别技术领域，更具体的说是涉及一种基于不确定性联合注意力的人的重识别方法及系统。

背景技术

人的重识别主要是指从不同场景下的多个摄像机拍摄的行人图像数据集中获取目标行人，是近几年来计算机视觉领域一项热门且重要的研究课题，由于在公共安全相关的领域中具有巨大的应用前景，常被用于寻找失踪人员或嫌疑人、跨摄像头跟踪、多摄像头场景检测等问题。但是，因为成像设备、环境噪声以及人体姿势等因素的影响，人的重识别任务经常出现一些值得注意的局部特征被抑制的问题，同一个人可能表现出较大的“类内”差异，同样，由于行人数据的复杂和庞大，不同人体可能表现出较小的“类间”差异。从而出现一个人“变异”为另一个人或者两张图像是同一个人却无法准确识别的问题，因此，对于研究人员而言，人的重识别仍然是一个极具挑战性的研究问题，现有的人重识别方法大多并没有考虑局部特征之间的关系，这会增加具有相似局部特征人的误识别问题。

在现有技术中，许多方法通过使用CNN侧重提取人图像的全局特征以获得表征信息，但它们忽略了身体特定部位的关键信息，两个人在全局特征具有极小的类间差异，但在头部区域特征的类间差异却很明显，这对整体特征的类间差异的扩大无疑形成了阻碍。为了获取更加显著的局部特征，还有一些方法从身体提取局部特征，并将其与全局特征结合形成更加有效的特征描述符。然而，这也产生了新的问题，由于一些摄像探测器收集的人体图像经常出现错位或遮挡，使得图像的部分区域并无有效特征信息，由此提取出的局部特征信息不仅无法准确表征人体特征，甚至会对整体特征信息的描述产生消极影响。因此，如何提供一种能够准确有效地提取局部特征的人的重识别方法是本领域技术人员亟需解决的问题。

发明内容

有鉴于此，本发明提供了一种基于不确定性联合注意力的人的重识别方法及系统，通过姿态激活和空间引导多注意力分支使模型聚焦于有效和可见的局部区域，两个分支共同作用可以获得更加有效且显著的局部特征，通过加入上下文关系网络，构建局部特征与上下文关系特征之间的强联系，以获得有区别的局部特征和关系特征。

为了实现上述目的，本发明提供如下技术方案：

一种基于不确定性联合注意力的人的重识别方法，包括以下步骤：

S1、提取输入图像的全局特征，空间特征和关键点特征；

S2、对关键点特征和空间特征进行联合学习，得到联合特征；

S3、构建联合特征与上下文信息的关系特征，得到上下文关系特征。

可选的，S2具体为：

S21、对全局特征和关键点特征进行元素级乘法运算得到关键点局部语义；

S22、将关键点特征热图映射为注意力热图，得到注意力得分；

S23、根据注意力得分进行特征擦除，得到姿态局部特征；

S24、以全局特征为中心，为每个空间特征增加拓扑关系，得到空间局部特征；

S25、将空间局部特征与姿态局部特征进行联合表征，得到联合特征。

可选的，S21的计算过程具体为：