[发明专利]一种私人相册的人脸搜索方法

摘要

本发明公开了一种私人相册的人脸搜索方法。本发明通过迁移学习训练Pose‑Facenet，对训练数据中人脸标签根据人脸姿态进行再划分，结合改进的DREAM++姿态生成模块，只需要校正到相同的姿态区间进行人脸比对即可，无需跨越大姿态角变化将非正脸姿态人脸校正为正脸再进行比对，降低姿态调整带来的信息丢失负面影响。利用私人相册中相邻拍摄时间相片通常存在易于辨识的相同人体的特点，在搜索出相册中容易比对成功的正脸人脸后，采用行人重识别技术对相邻拍摄时间的相片搜索出与其所属人体为同一人体的人体图像，从而获得该人体中的搜索目标的新姿态人脸，丰富搜索目标各姿态的人脸信息，降低需要进行大角度姿态校正的概率，从而达到更好的人脸搜索效果。

主权项

1.一种私人相册的人脸搜索方法，其特征在于，所述方法包括：步骤一，基于Facenet迁移学习训练Pose‑Facenet模型，基于DREAM模块改进训练DREAM++模块，前者用于根据姿态区间对人脸标签进行再划分，后者用于把姿态转换到同一的姿态区间；步骤二，输入检索图像，进行人脸检测得到检索人脸图像，并对检索人脸图像进行人脸姿态估计和应用Pose‑Facenet模型进行人脸特征提取，输出检索人脸的人脸姿态以及人脸编码，添加到检索信息中；步骤三，对相册中每一相片得到相片中各人脸的位置信息、人脸姿态、人脸编码，并对相片进行人体检测，若人体检测的人体位置信息与人脸位置信息存在明确对应关系，则为人脸加上人体图像信息，组合成人脸信息添加入待搜索信息列表中；步骤四，对于待搜索信息列表中人脸姿态与检索信息中的人脸姿态属于同一区间的人脸信息，计算其人脸编码与检索信息中的人脸编码之间的距离，若满足设定的距离阈值，则判断为满足搜索要求的人脸，也就是与检索人脸是同一张人脸；步骤五，对于步骤四中满足搜索要求的人脸信息，若步骤三中检测到其有明确对应的人体图像，根据该人体图像对与所属相片拍摄时间邻近的相片应用行人重识别技术检索出与之相同的人体图像，得到该人体图像对应的人脸信息；步骤六，应用DREAM++模块，整合步骤五搜索到的信息，得到具有全姿态区间的人脸检索信息；步骤七，对待搜索信息列表中没有判别为满足搜索要求的人脸信息，依次进行扫描，根据其人脸姿态选择检索信息中同一姿态区间下的人脸编码进行匹对，若距离满足阈值，则判别为满足要求的人脸信息，否则不满足；步骤八，对于所有满足要求的人脸信息，输出其所属相片，作为最终搜索结果。