[发明专利]一种人脸校正方法及电子设备在审
申请号: | 201910514753.7 | 申请日: | 2019-06-14 |
公开(公告)号: | CN112085647A | 公开(公告)日: | 2020-12-15 |
发明(设计)人: | 王利强;丁欣;姜永涛;卢恒惠;周恒;何剑兰 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06T5/50;G06T17/00 |
代理公司: | 北京中博世达专利商标代理有限公司 11274 | 代理人: | 申健 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 校正 方法 电子设备 | ||
1.一种人脸校正方法,其特征在于,所述方法包括:
电子设备获取第一二维2D图像,所述第一2D图像中的人脸面部的朝向与所述电子设备的显示屏的垂线不平行;
所述电子设备获取三维3D人脸模型,所述3D人脸模型中人脸面部的朝向与摄像头捕获所述第一2D图像时用户人脸相对于所述摄像头的朝向相同;
所述电子设备对所述3D人脸模型中的3D人脸进行面部朝向校正,校正后的所述3D人脸模型中人脸面部的朝向与所述显示屏的垂线平行;
所述电子设备对校正后的所述3D人脸模型进行投影,获得2D人脸图像,所述2D人脸图像中人脸面部的朝向与所述显示屏的垂线平行;
所述电子设备以所述2D人脸图像中的人脸面部图像为目标,对所述第一2D图像中的人脸面部图像进行仿射变换;
所述电子设备生成所述2D人脸图像的人脸面部的掩码mask;
所述电子设备根据所述2D人脸图像的人脸面部的mask,将进行仿射变换后的第一2D图像和所述2D人脸图像进行融合,获得第二2D图像,所述第二2D图像中人脸面部的朝向与所述显示屏的垂线平行。
2.根据权利要求1所述的方法,其特征在于,所述电子设备还包括所述摄像头,所述摄像头和所述显示屏之间存在以下至少一种关系:所述摄像头的朝向与所述显示屏的朝向不同,所述摄像头与所述显示屏之间存在距离;
所述电子设备获取第一二维2D图像,包括:
所述电子设备通过所述摄像头采集图像序列,所述图像序列中包括所述第一2D图像。
3.根据权利要求1或2所述的方法,其特征在于,所述摄像头为2D摄像头,所述电子设备获取三维3D人脸模型,包括:
所述电子设备根据所述第一2D图像进行人脸3D重建,获得所述3D人脸模型。
4.根据权利要求3所述的方法,其特征在于,所述电子设备根据所述第一2D图像进行人脸3D重建,获得所述3D人脸模型,包括:
所述电子设备对所述第一2D图像进行检测,获取人脸面部的轮廓和特征点的位置,所述特征点包括人脸的眉毛,眼睛,鼻子及嘴巴对应位置处的特征点;
所述电子设备根据所述人脸面部的轮廓和特征点的位置进行人脸3D重建,获得所述3D人脸模型。
5.根据权利要求1-4中任一项所述的方法,其特征在于,所述电子设备对所述3D人脸模型中的3D人脸进行面部朝向校正,包括:
所述电子设备获取所述摄像头的朝向与所述显示屏的朝向的夹角;
所述电子设备根据所述摄像头的朝向与所述显示屏的朝向的夹角,对所述3D人脸模型中的3D人脸进行面部朝向校正。
6.根据权利要求1-5中任一项所述的方法,其特征在于,所述电子设备对校正后的所述3D人脸模型进行投影,获得2D人脸图像,包括:
所述电子设备对校正后的所述3D人脸模型进行投影,获得人脸投影图像;
所述电子设备根据校正所述3D人脸模型中3D人脸的面部朝向时对3D人脸旋转的角度和方向,对所述人脸投影图像的中的人脸位置进行调整,获得所述2D人脸图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910514753.7/1.html,转载请声明来源钻瓜专利网。