[发明专利]一种虚拟视点的生成方法、装置、存储介质及电子设备在审
申请号: | 202210688177.X | 申请日: | 2022-06-16 |
公开(公告)号: | CN115134579A | 公开(公告)日: | 2022-09-30 |
发明(设计)人: | 程京;杜绪晗;陈誉中;焦少慧 | 申请(专利权)人: | 抖音视界(北京)有限公司 |
主分类号: | H04N13/275 | 分类号: | H04N13/275;H04N13/239 |
代理公司: | 北京远智汇知识产权代理有限公司 11659 | 代理人: | 鲁艳萍 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 虚拟 视点 生成 方法 装置 存储 介质 电子设备 | ||
本公开实施例提供了一种虚拟视点的生成方法、装置、存储介质及电子设备。其中方法包括:接收第一视点图像和第二视点图像;基于虚拟视点生成模型,对所述第一视点图像和所述第二视点图像进行处理,得到虚拟视点图像,其中,虚拟视点为第一视点和第二视点的中间视点;展示所述虚拟视点图像。本公开实施例通过图像处理的方式确定新增视点的图像/视频,替代了通过设置物理视点的方式采集各视点图像/视频的情况,减少了设置物理设备的数量,进一步减少了物理设备导致的成本高、搭建难度大的问题。
技术领域
本公开实施例涉及视频及图像处理技术领域,尤其涉及一种虚拟视点的生成方法、装置、存储介质及电子设备。
背景技术
晚会和体育赛事等多采用自由视角的方式进行直播,自由视角技术可展示多角度的视频,观看用户可进行多自由度的交互体验。
目前,自由视角技术多采样相机阵列的方式进行视频采集,每一相机用于采集一个视点的视频。但是上述视频采集方式,依赖于相机硬件的同步采集,拍摄成本高、拍摄难度大,同时对带宽负载造成压力。
发明内容
本公开提供一种虚拟视点的生成方法、装置、存储介质及电子设备,以实现基于已知视点的视频生成虚拟视点的视频,减少物理视点的数量。
第一方面,本公开实施例提供了一种虚拟视点的生成方法,包括:
接收第一视点图像和第二视点图像;
基于虚拟视点生成模型,对所述第一视点图像和所述第二视点图像进行处理,得到虚拟视点图像,其中,虚拟视点为第一视点和第二视点的中间视点;
展示所述虚拟视点图像。
第二方面,本公开实施例还提供了一种虚拟视点的生成装置,包括:
图像接收模块,用于接收第一视点图像和第二视点图像;
图像生成模块,用于基于虚拟视点生成模型,对所述第一视点图像和所述第二视点图像进行处理,得到虚拟视点图像,其中,虚拟视点为第一视点和第二视点的中间视点;
图像展示模块,用于展示所述虚拟视点图像。
第三方面,本公开实施例还提供了一种电子设备,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明实施例提供的虚拟视点的生成方法。
第四方面,本公开实施例还提供了种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例提供的虚拟视点的生成方法。
本公开实施例提供的技术方案,通过虚拟视点生成模型对两个已知视点的图像进行处理,以得到位于两个已知视点中间的虚拟视点的虚拟视点图像,相应的,针对于两个已知视点的视频,可得到于两个已知视点中间的虚拟视点的虚拟视点视频。通过图像处理的方式确定新增视点的图像/视频,替代了通过设置物理视点的方式采集各视点图像/视频的情况,减少了设置物理设备的数量,进一步减少了物理设备导致的成本高、搭建难度大的问题。同时,通过生成虚拟视点的方式,可缓解物理设备导致的对视点间隔角度的限定,可生成多个虚拟角视点,且对虚拟视点的数量可不做限定,可满足对任一展示视点的需求。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1是本公开实施例提供的拍摄环境的俯视示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于抖音视界(北京)有限公司,未经抖音视界(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210688177.X/2.html,转载请声明来源钻瓜专利网。