[发明专利]人脸形状卡通化方法、装置、设备及存储介质在审
| 申请号: | 202210307587.5 | 申请日: | 2022-03-25 |
| 公开(公告)号: | CN114627216A | 公开(公告)日: | 2022-06-14 |
| 发明(设计)人: | 梁彦军 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
| 主分类号: | G06T13/40 | 分类号: | G06T13/40;G06T17/20;G06T19/20 |
| 代理公司: | 北京华夏泰和知识产权代理有限公司 11662 | 代理人: | 唐会娜 |
| 地址: | 100080 北京*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 脸形 卡通 方法 装置 设备 存储 介质 | ||
本申请涉及一种人脸形状卡通化方法、装置、设备及存储介质,其中,所述方法包括:获取预设的三维初始卡通形状;获取输入的人脸图像;将所述人脸图像输入到三维可变形模型中,得到预测的身份系数和表情系数;利用所述身份系数和所述表情系数对所述三维可变形模型对应的初始三维形状进行变形处理,得到重建三维形状;基于所述重建三维形状,对所述三维初始卡通形状进行变形处理,得到所述人脸图像对应的目标三维卡通形状。本申请用以解决现有技术中,无法通过图片生成用户个性化的三维卡通化形象的技术问题。
技术领域
本申请涉及人工智能技术领域,尤其涉及一种人脸形状卡通化方法、装置、设备及存储介质。
背景技术
目前,特效相机和拍摄道具等功能已经成为了视频类的应用程序的标配,用户只需要上传一张照片或是一段视频,就可以自动合成卡通风格的个性化的脸部特效,但是,目前合成卡通风格的个性化脸部特效仅限在二维图像的卡通化上,无法通过图片生成用户个性化的三维卡通化形象。
发明内容
本申请提供了一种人脸形状卡通化方法、装置、设备及存储介质,用以解决现有技术中,无法通过图片生成用户个性化的三维卡通化形象的技术问题。
第一方面,本申请提供了一种人脸形状卡通化方法,包括:
获取预设的三维初始卡通形状;
获取输入的人脸图像;
将所述人脸图像输入到三维可变形模型中,得到预测的身份系数和表情系数;
利用所述身份系数和所述表情系数对所述三维可变形模型对应的初始三维形状进行变形处理,得到重建三维形状;
基于所述重建三维形状,对所述三维初始卡通形状进行变形处理,得到所述人脸图像对应的目标三维卡通形状。
可选的,所述基于所述重建三维形状,对所述三维初始卡通形状进行变形处理,得到所述人脸图像对应的目标三维卡通形状,包括:
获取所述三维初始卡通形状与所述初始三维形状之间的三角面片间的对应关系;
计算所述初始三维形状和所述重建三维形状之间的变形梯度;
根据所述对应关系,将所述变形梯度迁移到所述三维初始卡通形状上,得到所述目标三维卡通形状。
可选的,所述获取所述三维初始卡通形状与所述初始三维形状之间的三角面片间的对应关系,包括:
对齐所述三维初始卡通形状和所述初始三维形状;
获取所述初始三维形状和所述三维初始卡通形状之间预先标定好的关键点对;
将所述关键点对作为初始点对,利用迭代最近点算法查找所述三维初始卡通形状和所述初始三维形状之间的三角面片间的对应关系。
可选的,所述获取所述初始三维形状和所述三维初始卡通形状之间预先标定好的关键点对,包括:
获取在所述三维初始卡通形状和所述初始三维形状上标注的第一数量的关键点对的位置;
利用所述第一数量的关键点的位置,对预设插值模型进行训练,得到训练后的插值模型;
获取在所述初始三维形状上,标注的第二数量的关键点的位置;
将所述第二数量的关键点的位置输入到所述训练后的插值模型中,得到所述第二数量的关键点中的每一个关键点对应的在所述三维初始卡通形状上的关键点的位置,得到第二数量的关键点对;
将所述第一数量的关键点对和所述第二数量的关键点对,作为所述预先标定好的关键点对。
可选的,所述获取预设的三维初始卡通形状,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210307587.5/2.html,转载请声明来源钻瓜专利网。





