[发明专利]用对象跟踪进行360度视频记录与回放

说明书

本发明涉及用对象跟踪进行360度视频记录与回放。在360度视频捕获与回放的系统中，360度视频可被捕获、拼接、编码、解码、呈现及回放。在一或多个实施方案中，解码装置接收360度视频流作为输入，并解码所述360度视频流，且存储器装置存储所述360度视频流及与所述360度视频流相关联的观看历史数据。呈现装置可使用来自所述观看历史数据的视角呈现经解码流。在一或多个实施方案中，对象跟踪装置跟踪所述经解码360度视频流中的一或多个对象，并提供与所述对象相关联的一或多个跟踪角度。所述呈现装置可使用所述一或多个跟踪角度呈现所述经解码360度视频流，以针对一或多个经呈现帧保持所述360度视频流中的至少一个对象。

相关申请案的交叉参考

本申请案依据35U.S.C.§119主张来自以下美国临时专利申请案的优先权益：2016年5月19日申请的标题为“360度视频捕获与回放(360DEGREE VIDEO CAPTURE ANDPLAYBACK)”的序列号为62/339,040的美国临时专利申请案；2016年11月14日申请的标题为“360度视频的记录与回放(RECORDING AND PLAYBACK OF 360 DEGREE VIDEO)”的序列号为62/418,061号美国临时专利申请案；及2016年11月4日申请的标题为“360度视频的对象跟踪(OBJECT TRACKING FOR 360DEGREE VIDEO)”的序列号为62/418,069号美国临时专利申请案，所述美国专利申请案的揭示内容借此出于所有目的以全文引用方式并入。

技术领域

本发明涉及视频捕获与回放，且更特定来说，涉及用对象跟踪进行360度视频记录与回放。

背景技术

360度视频(也称为360度视频)、沉浸式视频及/或球形视频是记录真实世界全景的视频，其中同时记录每个方向上的视图，使用全向摄像机或相机集合拍摄。在回放期间，观看者能够控制视野(FOV)角度及观看方向(虚拟现实形式)。

发明内容

本发明提供一种装置，其包括：解码装置，其经配置以接收360度视频流作为输入，并解码所述360度视频流；存储器装置，其经配置以存储所述360度视频流及与所述360度视频流相关联的观看历史数据；及呈现装置，其经配置以使用来自所述观看历史数据的一或多个视角呈现所述经解码流。

本发明还提供一种计算机实施的方法，其包括：解码360度视频流；从所述经解码360度视频流提取多个预先确定的视角；使用所述经提取预先确定的视角呈现所述经解码360度视频流；及提供所述经呈现360度视频流以显示。

本发明还提供一种系统，其包括：解码装置，其经配置以接收360度视频流作为输入并解码所述360度视频流；对象跟踪装置，其经配置以跟踪所述经解码360度视频流中的一或多个对象，并提供与所述一或多个对象相关联的一或多个跟踪角度；及呈现装置，其经配置以使用来自所述对象跟踪装置的所述一或多个跟踪角度呈现所述经解码360度视频流，以保持一或多个经呈现帧的经呈现视图中的所述一或多个对象中的至少一者。

附图说明

在所附权利要求书中陈述本技术的某些特征。然而，出于解释目的，在附图中陈述本技术的一或多个实施方案。

图1说明根据一或多个实施方案的实例网络环境，360度视频捕获与回放可被实施于其中。

图2概念地说明等距柱状投影格式的实例。

图3概念地说明等距柱状投影与地球地图的实例。

图4概念地说明360度视频与等距柱状投影的实例。

图5概念地说明等距柱状投影布局中的360度图像的实例。

图6概念地说明六面立方体的实例定义。

图7概念地说明立方体投影格式的实例。