[发明专利]一种用于检测的方法和装置有效
申请号: | 201711024466.5 | 申请日: | 2017-10-27 |
公开(公告)号: | CN109726613B | 公开(公告)日: | 2021-09-10 |
发明(设计)人: | 林崇仰;张普;周维 | 申请(专利权)人: | 虹软科技股份有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08 |
代理公司: | 杭州裕阳联合专利代理有限公司 33289 | 代理人: | 姚宇吉 |
地址: | 310000 浙江省杭州市西*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 用于 检测 方法 装置 | ||
1.一种用于检测的方法,其特征在于,所述方法包括:
接收第一图像,所述第一图像包括至少一个人脸;
对所述第一图像进行下述处理:检测所述第一图像中人脸的左眼和/或右眼,估计人脸相对于摄像装置的位置,以及估计所述人脸的姿态;
将所述处理的结果输入第一神经网络,确定所述人脸的视线;
其中,所述第一神经网络包括:
所述第一卷积层与所述第二卷积层的输出为第二全连接层的输入;
所述第一全连接层的输出为第三全连接层的输入;
所述第二全连接层与第三全连接层的输出为第四全连接层的输入;
所述估计所述人脸的姿态的结果与所述第四全连接层的输出为所述人脸的视线的结果的输入;
将所述处理的结果输入所述第一神经网络,包括:
将检测所述第一图像中人脸的左眼的结果输入所述第一神经网络的第一卷积层,和/或,将检测所述第一图像中人脸的右眼的结果输入所述第一神经网络的第二卷积层;
将估计人脸相对于摄像装置的位置的结果输入所述第一神经网络的第一全连接层;
将估计所述人脸的姿态的结果输入所述第一神经网络。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述人脸的视线确定所述人脸的视点;
根据所述人脸的视点相对于终端屏幕的位置触发所述终端的操作。
3.根据权利要求2所述的方法,其特征在于,
所述根据所述人脸的视点相对于终端屏幕的位置触发所述终端的操作,包括:
确定除用户外的其他人脸的视点位于所述终端屏幕上,所述终端进行报警。
4.根据权利要求2所述的方法,其特征在于,
所述根据所述人脸的视线确定所述人脸的视点,包括:
根据所述人脸的视线、所述人脸的左眼和/或右眼的位置以及摄像装置与终端屏幕的位置关系确定所述人脸的视点。
5.根据权利要求4所述的方法,其特征在于,
所述人脸的左眼和/或右眼的位置,包括:
所述人脸的左眼和/或右眼的中心点的位置,所述人脸的左眼和/或右眼的中心点的位置由所述人脸的左眼和/或右眼的眼角点的位置计算得到。
6.根据权利要求5所述的方法,其特征在于,
所述眼角点的位置为根据所述第一图像以及人脸数据库拟合得到。
7.根据权利要求1所述的方法,其特征在于,
所述检测所述第一图像中人脸的左眼和/或右眼包括:
确定出所述第一图像中包括所述左眼和/或右眼的图像。
8.根据权利要求1所述的方法,其特征在于,
所述估计人脸相对于摄像装置的位置,包括:
根据所述第一图像检测所述人脸的特征点,确定包括所述人脸的特征点的外接矩形;
将所述外接矩形以及所述第一图像归一化并且二值化为第二图像。
9.根据权利要求1所述的方法,其特征在于,
所述估计所述人脸的姿态,包括:
根据所述第一图像以及人脸数据库检测所述人脸的二维特征点以及三维特征点的坐标;
根据拍摄所述第一图像的摄像装置的内部参数,以及所述人脸的二维特征点以及三维特征点估计所述人脸的姿态。
10.根据权利要求9所述的方法,其特征在于,
所述人脸的姿态通过旋转矩阵表示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于虹软科技股份有限公司,未经虹软科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711024466.5/1.html,转载请声明来源钻瓜专利网。