[发明专利]一种视频帧生成方法及装置有效
| 申请号: | 202110184345.7 | 申请日: | 2021-02-08 |
| 公开(公告)号: | CN112954454B | 公开(公告)日: | 2023-09-05 |
| 发明(设计)人: | 柳政 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
| 主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/4402;G06T5/50 |
| 代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 孟维娜;马敬 |
| 地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 视频 生成 方法 装置 | ||
1.一种视频帧生成方法,其特征在于,所述方法包括:
获得第一视频帧和第二视频帧;
对所述第一视频帧和第二视频帧进行降采样处理,得到分辨率为预设分辨率的第一图像和第二图像,其中,所述预设分辨率为:已有图像生成模型所支持的输入图像的分辨率范围内的分辨率;
将所述第一图像和第二图像输入至所述图像生成模型进行图像融合,生成目标图像;
对所述目标图像进行升采样处理,得到分辨率为目标分辨率的目标帧,其中,所述目标分辨率为所述第一视频帧和所述第二视频帧的分辨率;
将所述目标帧中至少一个目标区域的图像内容替换为第一视频帧或第二视频帧中对应区域的图像内容,得到替换后的目标帧;
所述将所述目标帧中至少一个目标区域的图像内容替换为第一视频帧或第二视频帧中对应区域的图像内容,得到替换后的目标帧,包括:
对第三图像和第四图像进行升采样处理,得到分辨率为所述目标分辨率的第三视频帧和第四视频帧,其中,所述第三图像为:所述第一视频帧经过降采样处理后得到的图像,所述第四图像为:所述第二视频帧经过降采样处理后得到的图像;
针对所述目标帧所包含的每一目标区域,从所述第三视频帧以及第四视频帧所包含的各个区域中,确定与该目标区域的匹配度最高的匹配区域;
将所述目标帧中至少一个目标区域的图像内容替换为相对应的原始图像内容,得到替换后的目标帧,其中,所述原始图像内容为:目标区域相对应的匹配区域在所属视频帧的原始视频帧中的图像内容,所述原始视频帧为:第一视频帧或第二视频帧。
2.根据权利要求1所述的方法,其特征在于,
所述对所述第一视频帧和第二视频帧进行降采样处理,得到分辨率为预设分辨率的第一图像和第二图像,包括:
对所述第一视频帧进行降采样处理,得到每一图像分量对应的、且分辨率为预设分辨率的第一图像;
对所述第二视频帧进行降采样处理,得到每一所述图像分量对应的、且分辨率为所述预设分辨率的第二图像;
所述将所述第一图像和第二图像输入至所述图像生成模型进行图像融合,生成目标图像,包括:
将每一图像对输入至所述图像生成模型进行图像融合,得到每一图像对所对应的目标图像,其中,所述图像对包括:相同图像分量所对应的第一图像和第二图像。
3.根据权利要求1所述的方法,其特征在于,
所述预设分辨率为所述分辨率范围内的最大分辨率。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过多层卷积层对替换后的目标帧和目标帧进行图像融合,得到融合后的视频帧。
5.根据权利要求1-4中任一项所述的方法,其特征在于,所述第一视频帧与第二视频帧相邻。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110184345.7/1.html,转载请声明来源钻瓜专利网。





