[发明专利]虚拟形象切换方法、装置、电子设备及存储介质有效
申请号: | 201911182022.3 | 申请日: | 2019-11-27 |
公开(公告)号: | CN110942501B | 公开(公告)日: | 2020-12-22 |
发明(设计)人: | 杨国基 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06T13/20 | 分类号: | G06T13/20;G06T13/40 |
代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 苗燕 |
地址: | 518057 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 形象 切换 方法 装置 电子设备 存储 介质 | ||
1.一种虚拟形象切换方法,其特征在于,应用于电子设备,所述方法包括:
当播放包括目标人物的虚拟图像的视频时,通过所述电子设备的摄像头获取所述目标人物的真实图像;
从所述虚拟图像中实时提取第一关键点并从所述真实图像中实时提取第二关键点,所述第一关键点与所述第二关键点属于所述目标人物的同一特征点;
确定所述第一关键点和所述第二关键点之间的距离是否不大于预设距离;
当所述第一关键点与所述第二关键点之间的距离不大于预设距离时,在所述视频中将所述虚拟图像切换为所述真实图像。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述第一关键点和所述第二关键点之间的距离大于预设距离时,判断所述第一关键点和所述第二关键点之间的距离是否不大于距离阈值,所述距离阈值大于所述预设距离;
当所述第一关键点和所述第二关键点之间的距离不大于距离阈值时,对所述第一关键点进行平滑处理,以缩小所述第一关键点和所述第二关键点之间的距离,直到所述第一关键点与所述第二关键点之间的距离不大于所述预设距离。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
当所述第一关键点和所述第二关键点之间的距离大于距离阈值时,输出调整信息,其中,所述调整信息用于指示所述目标人物调整姿势,以缩小所述第一关键点和所述第二关键点之间的距离。
4.根据权利要求2所述的方法,其特征在于,所述方法还包括:
当所述第一关键点和所述第二关键点之间的距离大于距离阈值时,基于所述第一关键点和所述第二关键点,得到目标关键点,所述目标关键点和所述第二关键点之间的距离小于所述第一关键点和所述第二关键点之间的距离;
基于所述目标关键点获取目标虚拟图像;
将所述视频中的虚拟图像更新为所述目标虚拟图像。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述第一关键点与所述第二关键点的数量均为多个且数量相同,多个所述第一关键点与多个所述第二关键点一一对应形成多个关键点组,且每个所述关键点组包括相互对应的一个第一关键点和一个第二关键点;所述确定所述第一关键点和所述第二关键点之间的距离是否不大于预设距离,包括:
分别获取所述多个关键点组中的每个关键点组中第一关键点和第二关键点之间的距离,得到多个距离结果;
分别将所述多个距离结果中的每个距离结果与所述预设距离进行比较,得到所述距离结果不大于所述预设距离的关键点组的数量;
判断所述数量是否超过预设数量;
当所述数量超过预设数量时,确定所述第一关键点和所述第二关键点之间的距离不大于预设距离。
6.根据权利要求1所述的方法,其特征在于,所述当播放包括目标人物的虚拟图像的视频时,获取所述目标人物的真实图像之前,还包括:
获取待播放的语音信息;
根据所述语音信息,确定与所述语音信息对应的第一关键点;
将所述第一关键点输入到预先训练好的虚拟形象模型,得到所述虚拟图像;
根据所述虚拟图像与所述语音信息生成视频。
7.根据权利要求6所述的方法,其特征在于,在所述将所述第一关键点输入到预先训练好的虚拟形象模型之前,还包括:
采集目标人物的图像;
从所述图像中提取出与所述目标人物对应的样本关键点和样本虚拟图像;
将所述样本关键点和所述样本虚拟图像输入到机器学习模型中进行训练,得到虚拟形象模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911182022.3/1.html,转载请声明来源钻瓜专利网。