[发明专利]视频生成方法、装置、可读介质及电子设备有效
申请号: | 202010694518.5 | 申请日: | 2020-07-17 |
公开(公告)号: | CN113949808B | 公开(公告)日: | 2022-12-27 |
发明(设计)人: | 靳潇杰;沈晓辉;王妍 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | H04N5/232 | 分类号: | H04N5/232 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 曹寒梅 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 生成 方法 装置 可读 介质 电子设备 | ||
1.一种视频生成方法,其特征在于,所述方法包括:
获取目标帧对应的原始图像,并识别出所述原始图像中的目标对象;
根据滑动变焦策略对所述原始图像中除所述目标对象外的初始背景图像进行滑动变焦处理,得到目标背景图像;其中,所述滑动变焦策略至少用于指示所述初始背景图像的滑动方向和变焦方向,所述滑动方向和所述变焦方向相反;
按照所述目标对象在所述原始图像中的位置,将所述目标对象的图像叠加在所述目标背景图像上,得到所述目标帧对应的目标图像;
基于所述目标帧对应的目标图像,生成目标视频;
所述初始背景图像通过以下方式获得:
在所述原始图像中去掉所述目标对象,得到第一背景图像;获取位于所述原始图像中所述目标对象所覆盖区域的第二背景图像;按照所述目标对象所覆盖区域的位置,将所述第二背景图像补充到所述第一背景图像中,得到所述初始背景图像。
2.根据权利要求1所述的方法,其特征在于,所述识别出所述原始图像中的目标对象,包括:
通过预先训练的目标对象识别模型识别出所述原始图像中的目标对象;
或,
通过所述目标对象对应的历史位置信息识别出所述原始图像中的目标对象,所述历史位置信息是通过对所述原始图像前的图像进行运动追踪得到的。
3.根据权利要求1所述的方法,其特征在于,所述根据滑动变焦策略对所述原始图像中除所述目标对象外的初始背景图像进行滑动变焦处理,得到目标背景图像,包括:
确定所述初始背景图像的透视点;
根据识别出的所述目标对象在所述原始图像中的初始位置和所述目标对象在画面中的期望位置,确定所述初始背景图像的所述滑动方向、滑动距离、所述变焦方向和变焦距离;
以所述透视点为中心、沿所述滑动方向以所述滑动距离对所述初始背景图像进行画面滑动;
以所述透视点为中心、沿所述变焦方向以所述变焦距离对所述初始背景图像进行画面变焦。
4.根据权利要求3所述的方法,其特征在于,所述确定所述初始背景图像的透视点,包括:
将所述原始图像的中心点确定为所述透视点;
或者,
所述确定所述初始背景图像的透视点,包括:
获取所述原始图像的深度信息;
根据所述深度信息确定所述原始图像中的灭点位置;
将所述灭点位置作为所述透视点。
5.根据权利要求3所述的方法,其特征在于,所述根据识别出的所述目标对象在所述原始图像中的初始位置和所述目标对象在画面中的期望位置,确定所述初始背景图像的所述滑动方向、滑动距离、所述变焦方向和变焦距离,包括:
确定所述初始位置在所述原始图像对应的三维图像空间中所处的第一坐标;
确定所述期望位置在所述三维图像空间中所处的第二坐标;
根据所述第一坐标和所述第二坐标,确定所述滑动方向、所述滑动距离、所述变焦方向和所述变焦距离。
6.根据权利要求1所述的方法,其特征在于,所述获取目标帧对应的原始图像,包括:
从待处理媒体文件中获取目标帧对应的原始图像,所述待处理媒体文件为包含所述目标对象的图像或视频;
或者,
从图像采集装置实时采集到的信息流中获取目标帧对应的原始图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010694518.5/1.html,转载请声明来源钻瓜专利网。