[发明专利]融合人脸特征与Re-ID特征排序的行人跟踪方法及装置

权利要求书

1.一种融合人脸特征与Re-ID特征排序的行人跟踪方法，其特征在于，包括：

获取待检测图片，对所述待检测图片进行行人检测和人脸检测，以得到行人图片、人脸图片、行人框坐标信息、人脸框坐标信息及新的行人轨迹信息；

将所述行人框坐标信息和人脸框坐标信息进行匹配，以确定行人和人脸之间的关联关系，从而实现将人脸特征融合到行人跟踪中；

对所述行人图片进行特征提取以得到当前行人外观特征向量，对所述人脸图片进行特征提取以得到当前人脸特征向量；

基于所述关联关系，采用跟踪器对所述当前行人外观特征向量、当前人脸特征向量和新的行人轨迹信息进行计算匹配，以完成对行人的跟踪；

其中，每一所述跟踪器对应于每一行人，所述跟踪器保存行人轨迹信息和特征集，所述特征集保存有行人外观特征和人脸特征；

对行人跟踪的具体过程为：

根据检测到的所述当前行人外观特征向量、当前人脸特征向量和新的行人轨迹信息与所述跟踪器保存的行人外观特征、人脸特征和行人轨迹信息组成匹配矩阵；

采用匈牙利算法对对所述匹配矩阵进行计算，以得到最优匹配结果；

所述方法还包括找回行人信息，具体为：

对每一所述跟踪器分配唯一的全局身份UID编号信息，并建立所述全局身份UID编号信息与人脸特征之间对应的人脸库；

若从所述待检测图片中检测到行人轨迹信息，且检测到与之相关联的人脸图片，则将提取的所述当前人脸特征向量与所述人脸库进行比对以得到比对结果；

若所述比对结果满足阈值，则得到目标行人信息，所述目标行人信息为所述人脸库中与所述当前人脸特征向量最相似的人脸特征的全局身份UID编号信息。

2.如权利要求1所述的行人跟踪方法，其特征在于，所述方法还包括：

当所述匹配矩阵中的参数为行人外观特征向量或人脸特征向量时，根据所述最优匹配结果确定目标特征向量，并将所述目标特征向量的命中次数加1；所述目标特征向量为所述

跟踪器中、与所述当前行人外观特征向量或当前人脸特征向量进行匹配的特征向量；

当所述跟踪器中特征向量个数超出阈值时，则将命中次数最少的特征向量删除，并将新的特征向量放入所述特征集；所述新的特征向量根据所述最优匹配结果所确定。

3.如权利要求1所述的行人跟踪方法，其特征在于，对每一所述跟踪器分配唯一的全局身份UID编号信息，具体包括：

当满足跟踪器匹配成功的次数条件时，将当前跟踪器中的特征集按照命中次数的高低和处于非激活状态的跟踪器中的特征集进行相似度计算；

如果处于非激活状态的跟踪器有满足条件的，则将处于非激活状态跟踪器的全局身份UID编号信息以及人脸特征信息赋给当前跟踪器；

如果在处于非激活状态的跟踪器中没有满足条件的，则将当前最大的全局身份UID编号信息加上1后再赋给当前跟踪器。

4.如权利要求3所述的行人跟踪方法，其特征在于，对每一所述跟踪器分配唯一的全局身份UID编号信息，具体包括：

当跟踪器中出现检测到的人脸特征时，如果当前跟踪器中存在继承的人脸特征信息，则计算新检测的人脸特征和继承的人脸特征之间的相似度，如果满足一定的阈值，则维持当前跟踪器的全局身份UID编号信息不变；如果不满足阈值，则将当前检测到的人脸特征和人脸库中进行比对，如果人脸库中存在满足相似度条件的人脸特征，则将人脸库中满足条件的特征向量的全局身份UID编号信息赋给当前跟踪器；

如果当前跟踪器中不存在继承的人脸特征，则将当前跟踪器中检测到的人脸特征和人脸库比对，人脸库中存在满足条件的，按照人脸库中的全局身份UID编号信息分配，不满足的把当前最大的全局身份UID编号信息加上1赋给当前跟踪器。

5.一种融合人脸特征与Re-ID特征排序的行人跟踪装置，其特征在于，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如权利要求1-4任一项所述的方法。