[发明专利]深度人脸图像的生成方法、装置、电子设备及介质有效
申请号: | 201911358809.0 | 申请日: | 2019-12-25 |
公开(公告)号: | CN111144284B | 公开(公告)日: | 2021-03-30 |
发明(设计)人: | 陈锦伟 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06T3/00;G06T17/00 |
代理公司: | 北京众达德权知识产权代理有限公司 11570 | 代理人: | 刘进 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 深度 图像 生成 方法 装置 电子设备 介质 | ||
1.一种深度人脸图像的生成方法,包括:
在获取目标用户的二维人脸图像和三维人脸图像之后,使用神经网络对所述二维人脸图像进行特征提取,并对提取到的二维特征点进行分类,得到分类后的二维特征点;以及
使用神经网络对所述三维人脸图像进行特征提取,并对提取到的三维特征点进行分类,得到分类后的三维特征点;
将所述分类后的二维特征点映射到三维特征空间中,得到三维映射特征点,其中,所述三维特征空间由所述分类后的三维特征点构成;
根据所述三维映射特征点,生成深度图;
利用所述三维人脸图像对所述深度图进行增强处理,得到增强后的所述深度图,并将增强后的所述深度图作为所述目标用户的深度人脸图像;
其中,所述利用所述三维人脸图像对所述深度图进行增强处理,得到增强后的所述深度图,并将增强后的所述深度图作为所述目标用户的深度人脸图像,包括:获取所述深度图相对于所述三维人脸图像的相对损失函数;通过生成对抗网络对所述深度图和所述三维人脸图像进行处理,得到所述深度图的对抗损失函数;根据所述相对损失函数和所述对抗损失函数,确定出所述深度图的目标损失函数;根据所述目标损失函数和所述三维映射特征点,生成所述目标用户的深度人脸图像。
2.如权利要求1所述的生成方法,所述使用神经网络对所述二维人脸图像进行特征提取,并对提取到的二维特征点进行分类,得到分类后的二维特征点,包括:
使用神经网络对所述二维人脸图像进行特征提取,得到所述提取到的二维特征点,其中,提取出的每个二维特征点包括多维向量;
使用分类器对所述提取到的二维特征点进行分类,得到所述分类后的二维特征点。
3.如权利要求2所述的生成方法,所述使用神经网络对所述三维人脸图像进行特征提取,并对提取到的三维特征点进行分类,得到分类后的三维特征点,包括:
使用神经网络对所述三维人脸图像进行特征提取,得到所述提取到的三维特征点,其中,提取出的每个三维特征点包括多维向量;
使用分类器对所述提取到的三维特征点进行分类,得到所述分类后的三维特征点。
4.如权利要求1所述的生成方法,所述将所述分类后的二维特征点映射到三维特征空间中,得到三维映射特征点,包括:
根据所述分类后的三维特征点构建所述三维特征空间;
通过残差神经网络将所述分类后的每个二维特征点映射到所述三维特征空间中,得到所述三维映射特征点。
5.如权利要求 1所述的生成方法,所述通过生成对抗网络对所述深度图和所述三维人脸图像进行处理,得到所述深度图的对抗损失函数,包括:
通过所述三维人脸图像对所述生成对抗网络中的判别器进行训练,得到已训练的判别器;
将所述深度图中的数据输入到所述已训练的判别器中,得到所述深度图的概率数据;
根据所述深度图的概率数据,得到所述对抗损失函数。
6.一种深度人脸图像的生成装置,包括:
二维特征点获取单元,用于在获取目标用户的二维人脸图像和三维人脸图像之后,使用神经网络对所述二维人脸图像进行特征提取,并对提取到的二维特征点进行分类,得到分类后的二维特征点;以及
三维特征点获取单元,用于使用神经网络对所述三维人脸图像进行特征提取,并对提取到的三维特征点进行分类,得到分类后的三维特征点;
三维映射单元,用于将所述分类后的二维特征点映射到三维特征空间中,得到三维映射特征点,其中,所述三维特征空间由所述分类后的三维特征点构成的;
深度图获取单元,用于根据所述三维映射特征点,生成深度图;
深度人脸图像获取单元,用于利用所述三维人脸图像对所述深度图进行增强处理,得到增强后的所述深度图,并将增强后的所述深度图作为所述目标用户的深度人脸图像
其中,所述深度人脸图像获取单元,用于获取所述深度图相对于所述三维人脸图像的相对损失函数;通过生成对抗网络对所述深度图和所述三维人脸图像进行处理,得到所述深度图的对抗损失函数;根据所述相对损失函数和所述对抗损失函数,确定出所述深度图的目标损失函数;根据所述目标损失函数和所述三维映射特征点,生成所述目标用户的深度人脸图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911358809.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:电能控制处理方法和装置
- 下一篇:一种电动推拉杆的水下密封结构
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序