[发明专利]一种私人相册的人脸搜索方法有效
| 申请号: | 201910236603.4 | 申请日: | 2019-03-26 |
| 公开(公告)号: | CN110069655B | 公开(公告)日: | 2022-07-12 |
| 发明(设计)人: | 曾坤;卢建业;周凡 | 申请(专利权)人: | 中山大学 |
| 主分类号: | G06F16/583 | 分类号: | G06F16/583;G06F16/51;G06V40/16 |
| 代理公司: | 暂无信息 | 代理人: | 暂无信息 |
| 地址: | 510006 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 私人 相册 搜索 方法 | ||
1.一种私人相册的人脸搜索方法,其特征在于,所述方法包括:
步骤一,基于Facenet迁移学习训练Pose-Facenet模型,基于DREAM模块改进训练DREAM++模块,前者用于根据姿态区间对人脸标签进行再划分,后者用于把姿态转换到同一的姿态区间;
步骤二,输入检索图像,进行人脸检测得到检索人脸图像,并对检索人脸图像进行人脸姿态估计和应用Pose-Facenet模型进行人脸特征提取,输出检索人脸的人脸姿态以及人脸编码,添加到检索信息中;
步骤三,对相册中每一相片得到相片中各人脸的位置信息、人脸姿态、人脸编码,并对相片进行人体检测,若人体检测的人体位置信息与人脸位置信息存在明确对应关系,则为人脸加上人体图像信息,组合成人脸信息添加入待搜索信息列表中;
步骤四,对于待搜索信息列表中人脸姿态与检索信息中的人脸姿态属于同一区间的人脸信息,计算其人脸编码与检索信息中的人脸编码之间的距离,若满足设定的距离阈值,则判断为满足搜索要求的人脸,也就是与检索人脸是同一张人脸;
步骤五,对于步骤四中满足搜索要求的人脸信息,若步骤三中检测到其有明确对应的人体图像,根据该人体图像对与所属相片拍摄时间邻近的相片应用行人重识别技术检索出与之相同的人体图像,得到该人体图像对应的人脸信息;
步骤六,应用DREAM++模块,整合步骤五搜索到的信息,得到具有全姿态区间的人脸检索信息;
步骤七,对待搜索信息列表中没有判别为满足搜索要求的人脸信息,依次进行扫描,根据其人脸姿态选择检索信息中同一姿态区间下的人脸编码进行匹对,若距离满足阈值,则判别为满足要求的人脸信息,否则不满足;
步骤八,对于所有满足要求的人脸信息,输出其所属相片,作为最终搜索结果;
其中,所述基于DREAM模块改进训练DREAM++模块,具体包括两个改进:一是在软门控制的参数中加入了pitch姿态角,使得模块能处理更为丰富的姿态变化;二是该模块通过增加姿态差参数配置网络计算目标姿态与当前姿态转换的软门控制参数,从而将原本只能将姿态校正成正脸区域的模块改进成可以校正成任意姿态的姿态生成模块。
2.如权利要求1所述的一种私人相册的人脸搜索方法,其特征在于,所述基于Facenet迁移学习训练Pose-Facenet模型,具体为根据姿态区间对人脸标签进行再划分。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学,未经中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910236603.4/1.html,转载请声明来源钻瓜专利网。





