[发明专利]三维人脸模型的生成方法、装置、设备及介质有效
申请号: | 202010018284.2 | 申请日: | 2020-01-08 |
公开(公告)号: | CN110807836B | 公开(公告)日: | 2020-05-12 |
发明(设计)人: | 林祥凯 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06T19/20 | 分类号: | G06T19/20 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 郭新禹 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 三维 模型 生成 方法 装置 设备 介质 | ||
1.一种三维人脸模型的生成方法,其特征在于,所述方法包括:
获取输入的目标对象的三维人脸网格,以及标准对象对应的标准人脸模型;
将所述三维人脸网格和所述标准人脸模型按照对应关系划分为至少两个面部子区域;
获取每个所述面部子区域的姿态参数以及与所述面部子区域对应的局部三维人脸网格,所述局部三维人脸网格是所述三维人脸网格的一部分;
根据每个所述面部子区域的姿态参数和所述局部三维人脸网格,计算将每个所述面部子区域拟合至所述三维人脸网格对应的面部子区域时的误差损失,所述误差损失包括顶点损失;
在所述顶点损失收敛时,将所述面部子区域拟合至所述三维人脸网格中对应的面部子区域;
在所述至少两个面部子区域拟合后,对相邻的面部子区域进行融合处理,得到所述目标对象对应的三维人脸模型;
根据每个所述面部子区域的形状基系数和表情基系数导出每个所述面部子区域对应的一组三维表情基;
对所述至少两个面部子区域对应的一组三维表情基进行所述融合处理,得到所述目标对象的一组三维表情基。
2.根据权利要求1所述的方法,其特征在于,所述顶点损失包括第一形状基损失和第一表情基损失;
所述根据每个所述面部子区域的姿态参数和所述局部三维人脸网格,计算将每个所述面部子区域拟合至所述三维人脸网格对应的面部子区域时的所述顶点损失,包括:
根据每个所述面部子区域的姿态参数、每个所述面部子区域对应的形状基系数和表情基系数、所述局部三维人脸网格,计算将每个所述面部子区域拟合至所述局部三维人脸网格的所述第一形状基损失和所述第一表情基损失;
根据所述第一形状基损失对所述形状基系数进行优化,计算得到每个所述面部子区域优化后的第一形状基系数;
根据所述第一表情基损失对所述表情基系数进行优化,计算得到每个所述面部子区域优化后的第一表情基系数;
重复上述有关计算所述第一形状基损失和第一表情基损失、优化所述第一形状基系数、优化所述第一表情基系数的三个步骤,直至所述第一形状基损失和所述第一表情基损失分别收敛。
3.根据权利要求1所述的方法,其特征在于,所述误差损失包括图像损失;
对于所述标准人脸模型中的每个面部子区域,计算将所述面部子区域拟合至所述三维人脸网格中对应的面部子区域时的误差损失,包括:
获取所述目标对象的n张人脸图像,所述n张人脸图像是用于生成所述三维人脸网格的图像,n为正整数;
获取所述人脸图像中的关键点信息、所述人脸图像的姿态参数和所述标准人脸模型中的关键点索引信息;
根据所述关键点信息、所述姿态参数和所述关键点索引信息,计算将每个所述面部子区域拟合至所述三维人脸网格中对应的面部子区域时的图像损失。
4.根据权利要求3所述的方法,其特征在于,所述图像损失包括第二形状基损失和第二表情基损失;
所述根据所述关键点信息、所述姿态参数和所述关键点索引信息,计算将每个所述面部子区域拟合至所述三维人脸网格中对应的面部子区域时的图像损失,包括:
根据所述关键点信息、所述姿态参数、所述关键点索引信息、每个所述面部子区域对应的形状基系数和表情基系数,计算将每个所述面部子区域拟合至所述三维人脸网格中对应的面部子区域时的所述第二形状基损失和所述第二表情基损失;
根据所述第二形状基损失对所述形状基系数进行优化,计算得到每个所述面部子区域优化后的第二形状基系数;
根据所述第二表情基损失对所述表情基系数进行优化,计算得到每个所述面部子区域优化后的第二表情基系数;
重复上述有关计算所述第二形状基损失和所述第二表情基损失、优化所述第二形状基系数、优化所述第二表情基系数三个步骤,直至所述第二形状基损失和所述第二表情基损失分别收敛。
5.根据权利要求1至4任一所述的方法,其特征在于,所述方法还包括:
在所述至少两个面部子区域拟合后,获取所述相邻的面部子区域中的过渡区域,所述过渡区域是所述相邻的面部子区域之间的公共点组成的区域;
对所述过渡区域进行所述融合处理,得到所述目标对象对应的三维人脸模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010018284.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种自动化点胶机
- 下一篇:人脸关键点检测方法、装置、设备及存储介质