[发明专利]仿真3D数字人生成方法、装置、电子设备及存储介质在审
申请号: | 202110020070.3 | 申请日: | 2021-01-07 |
公开(公告)号: | CN112669422A | 公开(公告)日: | 2021-04-16 |
发明(设计)人: | 杨国基;刘致远;陈泷翔;王鑫宇;叶颖;吴悦 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40 |
代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 苗燕 |
地址: | 518057 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 仿真 数字 人生 成方 装置 电子设备 存储 介质 | ||
本申请公开了一种仿真3D数字人生成方法、装置、电子设备及存储介质,该仿真3D数字人生成方法包括获取描述参数,描述参数包括目标物相对于参考位置的相对位置信息,目标物包括用于标定仿真数字人角度的物体;根据相对位置信息确定所需呈现的仿真数字人的呈现角度;根据呈现角度和预设的仿真数字人模型,获得与呈现角度对应的仿真数字人图像;输出仿真数字人图像。该方法可以用于生成模特图像,使得在用于训练获得仿真数字人的模特没有时间时,可以通过该模特训练得到的仿真数字人模型生成各种角度的仿真数字人图像,无需专门邀约模特在特定时间和地点参与图像拍摄,还可以模拟出用户实时与仿真数字人处于面对面交流的环境,优化了人机交互体验。
技术领域
本申请涉及虚拟形象构建技术领域,更具体地,涉及一种仿真3D数字人生成方法、装置、电子设备及存储介质。
背景技术
近些年来,随着信息技术的不断发展和应用,仿真数字人呈现场景也日益增多。传统的仿真数字人呈现方法一般是通过固定几个动作,针对不同场景呈现对应状态下的仿真数字人。现阶段出现了一种通过虚拟形象呈现的方法,该种方法通常是通过神经网络的训练,使得仿真数字人能够呈现更加多样化的动作,从而保证呈现效果更好。虽然该种方法相较于传统的仿真数字人呈现方法,显示效果更加逼真,但是由于在现有技术中该通过虚拟形象呈现的方法中,虚拟形象的呈现角度是固定的,使得画面的呈现效果不逼真。
发明内容
鉴于上述问题,本申请实施例提出了一种仿真3D数字人生成方法、装置、电子设备及存储介质,以解决以上问题。
第一方面,本申请实施例提供了一种仿真3D数字人生成方法,该仿真3D数字人生成方法包括:获取描述参数,描述参数包括目标物相对于参考位置的相对位置信息,目标物包括用于标定仿真数字人角度的物体;根据相对位置信息确定所需呈现的仿真数字人的呈现角度;根据呈现角度和预设的仿真数字人模型,获得与呈现角度对应的仿真数字人图像;输出仿真数字人图像。
可选地,获取描述参数,包括:获取包含目标物的图像,基于图像确定目标物的空间位置信息;获取参考位置的参考位置信息,参考位置用于表征仿真数字人的参照物的位置;根据空间位置信息和参考位置信息,确定目标物相对参考位置的相对位置信息。
可选地,根据空间位置信息和参考位置信息,确定目标物相对参考位置的相对位置信息,包括:根据空间位置信息获取目标物的目标坐标参数;根据参考位置信息获取参照物的参考坐标参数;将目标坐标参数与参考坐标参数进行比对,确定目标物与参照物之间的相对距离和相对角度,以得到包括相对距离和相对角度的相对位置信息。
可选地,根据呈现角度和预设的仿真数字人模型,获得与呈现角度对应的仿真数字人图像,包括:根据呈现角度,从预设的仿真数字人模型中获取与呈现角度对应的多张目标图像;对多张目标图像进行组合,获得与描述参数对应的仿真数字人图像。
可选地,在获取描述参数之前,方法还包括:获取多张样本图像以及与每张样本图像对应的样本描述参数;根据样本图像以及样本描述参数构建仿真数字人模型,得到预设的仿真数字人模型。
可选地,样本描述参数包括相机参数;根据样本图像以及样本描述参数构建仿真数字人模型,得到预设的仿真数字人模型,包括:获取与相机参数对应的样本图像配置参数;根据样本图像获取目标模特的角度信息,并将角度信息与样本图像配置参数关联;根据样本图像配置参数和角度信息构建仿真数字人模型,得到预设的仿真数字人模型。
可选地,样本描述参数还包括样本输入信息;根据样本图像以及样本描述参数构建仿真数字人模型,得到预设的仿真数字人模型,包括:获取与样本输入信息对应的样本语义信息;根据样本图像获取目标模特的样本面部表情参数,并将样本语义信息与样本面部表情参数关联;根据样本语义信息和样本面部表情参数构建仿真数字人模型,得到预设的仿真数字人模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110020070.3/2.html,转载请声明来源钻瓜专利网。