[发明专利]过渡帧的生成方法、装置、电子设备及存储介质在审
| 申请号: | 202210615538.8 | 申请日: | 2022-05-31 |
| 公开(公告)号: | CN115082821A | 公开(公告)日: | 2022-09-20 |
| 发明(设计)人: | 段颖琳;卢德辉;林悦 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
| 主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/774;G06T13/20;G06V10/82 |
| 代理公司: | 北京风雅颂专利代理有限公司 11403 | 代理人: | 李翔 |
| 地址: | 310056 浙江省杭州*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 过渡 生成 方法 装置 电子设备 存储 介质 | ||
1.一种过渡帧的生成方法,其特征在于,包括:
获取待制作动画的风格特征和关键帧的特征矩阵;
将所述风格特征和所述关键帧的特征矩阵输入到训练获得的预测模型中,得到所述动画的过渡帧的特征矩阵;
基于所述过渡帧的特征矩阵得到所述动画的过渡帧。
2.根据权利要求1所述的方法,其特征在于,训练所述预测模型的方法包括:
设置所述动画的多种风格特征,并确定与每种风格特征对应的样本关键帧的特征矩阵;
将每种风格特征及其对应的样本关键帧的特征矩阵输入到所述预测模型的基准模型中进行模型训练,以使所述基准模型在测试时输出的过渡帧的特征矩阵与所述样本关键帧的特征矩阵对应。
3.根据权利要求1所述的方法,其特征在于,所述预测模型的基准模型为GAN,所述GAN的生成器和判别器均为transformer。
4.根据权利要求1所述的方法,其特征在于,将所述风格特征和所述关键帧的特征矩阵输入到训练获得的预测模型中,得到所述动画的过渡帧的特征矩阵,具体还包括:
获取所述动画需要所述过渡帧的目标数量;
将所述风格特征、所述关键帧的特征矩阵以及所述目标数量输入到训练获得的预测模型中,得到所述动画的过渡帧的特征矩阵。
5.根据权利要求4所述的方法,其特征在于,将所述风格特征、所述关键帧的特征矩阵以及所述目标数量输入到训练获得的预测模型中,得到所述动画的过渡帧的特征矩阵,具体包括:
将所述风格特征和所述关键帧的特征矩阵输入到训练获得的预测模型中,得到预设数量的所述动画的备选过渡帧的特征矩阵;其中,每个所述备选过渡帧均按照时间顺序对应有一个排列序号;
确定与所述目标数量对应的多个排列序号,并基于所述多个排列序号从预设数量的所述备选过渡帧的特征矩阵中确定所述动画的过渡帧的特征矩阵;其中,所述目标数量不大于预设数量。
6.根据权利要求1所述的方法,其特征在于,所述特征矩阵包括位移矩阵和骨骼旋转矩阵。
7.根据权利要求1所述的方法,其特征在于,在得到所述动画的过渡帧的特征矩阵之后,所述方法还包括:
基于正向动力学算法和反向动力学算法对所述动画的过渡帧的特征矩阵进行调整。
8.根据权利要求1所述的方法,其特征在于,所述关键帧包括所述动画的开头关键帧和结尾关键帧。
9.一种过渡帧的生成装置,其特征在于,包括:
获取模块,获取待制作动画的风格特征和关键帧的特征矩阵;
模型模块,将所述风格特征、所述关键帧的特征矩阵输入到训练获得的预测模型中,得到所述动画的过渡帧的特征矩阵;
生成模块,基于所述过渡帧的特征矩阵生成所述动画的过渡帧。
10.一种电子设备,其特征在于,包括存储器、处理器及存储在所述存储器上并可由所述处理器执行的计算机程序,所述处理器执行所述程序时实现如权利要求1至8中任意一项所述的方法。
11.一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令用于使计算机执行根据权利要求1至8中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210615538.8/1.html,转载请声明来源钻瓜专利网。





