[发明专利]虚拟图像构建方法、装置、设备及存储介质在审
| 申请号: | 202110645973.0 | 申请日: | 2021-06-09 |
| 公开(公告)号: | CN115460372A | 公开(公告)日: | 2022-12-09 |
| 发明(设计)人: | 邹超洋 | 申请(专利权)人: | 广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司 |
| 主分类号: | H04N7/15 | 分类号: | H04N7/15;H04N7/14;H04N21/44;H04N21/81;G06T17/00;G06V40/16 |
| 代理公司: | 北京泽方誉航专利代理事务所(普通合伙) 11884 | 代理人: | 陈照辉 |
| 地址: | 510530 广*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 虚拟 图像 构建 方法 装置 设备 存储 介质 | ||
1.一种虚拟图像构建方法,其特征在于,包括:
获取离线采集的第一图像,所述第一图像包含目标对象的第一人脸图像;
根据所述第一人脸图像和预先确定的表情基参数构建所述目标对象的人脸中性表情基和多个人脸个性化表情基;
获取在线采集的第二图像,所述第二图像包含所述目标对象的第二人脸图像;
根据所述人脸中性表情基和多个所述人脸个性化表情基,确定所述目标对象的三维人脸模型映射到所述第二人脸图像时需要的位姿参数和各所述人脸个性化表情基的权重系数;
将所述位姿参数和所述权重系数发送至远端设备,以使所述远端设备根据所述位姿参数和所述权重系数生成与所述第二人脸图像相对应的虚拟图像。
2.根据权利要求1所述的虚拟图像构建方法,其特征在于,所述获取离线采集的第一图像之前,包括:
获取预先构建的基准中性身份信息、参考中性表情基和多个参考个性化表情基;
确定所述参考中性表情基与各所述参考个性化表情基之间的形变信息;
根据所述形变信息和所述基准中性身份信息确定相对于所述基准中性身份信息的多个基准个性化表情基,每个所述参考个性化表情基对应一个所述基准个性化表情基;
确定所述基准个性化表情基与所述基准中性身份信息之间的表情基参数,每个所述基准个性化表情基对应一个所述表情基参数。
3.根据权利要求2所述的虚拟图像构建方法,其特征在于,所述根据所述第一人脸图像和预先确定的表情基参数构建所述目标对象的人脸中性表情基和多个人脸个性化表情基包括:
确定所述第一人脸图像中各人脸关键点的第一坐标数组;
根据所述第一坐标数组、所述第一人脸图像和所述基准中性身份信息构建所述目标对象的人脸中性表情基;
根据预先确定的表情基参数和所述人脸中性表情基构建多个人脸个性化表情基,每个所述表情基参数对应一个人脸个性化表情基。
4.根据权利要求1所述的虚拟图像构建方法,其特征在于,所述根据所述人脸中性表情基和多个所述人脸个性化表情基,确定所述目标对象的三维人脸模型映射到所述第二人脸图像时需要的位姿参数和各所述人脸个性化表情基的权重系数包括:
根据所述人脸中性表情基和多个所述人脸个性化表情基,构建所述目标对象的三维人脸模型;
确定所述三维人脸模型映射到所述第二人脸图像时的误差参数公式;
根据所述误差参数公式,确定误差参数最小时所述三维人脸模型的位姿参数以及各所述人脸个性化表情基的权重系数。
5.根据权利要求4所述的虚拟图像构建方法,其特征在于,还包括:
获取预先构建的互为排斥表情基;
根据所述互为排斥表情基对各所述人脸个性化表情基进行分组,得到多个表情基组,每个所述表情基组中的任意两个人脸个性化表情基间均不互为排斥;
所述根据所述误差参数公式,确定误差参数最小时所述三维人脸模型的位姿参数以及各所述人脸个性化表情基的权重系数包括:
根据所述误差参数公式,计算每个所述表情基组对应的最小误差参数,以及在最小误差参数时所述三维人脸模型的位姿参数和所述表情基组内各人脸个性化表情基的权重系数;
在每个所述表情基组对应的所述最小误差参数中,将最小的最小误差参数对应的位姿参数以及权重系数作为最终得到的位姿参数和权重系数。
6.根据权利要求5所述的虚拟图像构建方法,其特征在于,所述根据所述互为排斥表情基对各所述人脸个性化表情基进行分组,得到多个表情基组之后,包括:
确定所述第二人脸图像中各人脸关键点的第二坐标数组;
根据所述第二坐标数组中关联的人脸关键点坐标确定所述第二人脸图像的第一备选人脸个性化表情基;
根据所述互为排斥表情基确定所述第一备选人脸个性化表情基对应的第一排斥人脸个性化表情基;
在多个所述表情基组中删除包含所述第一排斥人脸个性化表情基的表情基组。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司,未经广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110645973.0/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序





