[发明专利]用于应用视频观看行为的方法和装置

说明书

一种方法、装置和计算机可读存储介质提供关于视频的第一帧和第二帧之间的观看行为的改变的信息。在该方法中，标识包括在相应帧内的多个对象。该方法确定第一帧中的所述多个对象中的至少一个中的每个的第一观看次数。对于在第一帧之后的第二帧，该方法确定在第二帧中的多个对象中的至少一个中的每个的第二观看次数，并且标识观看第一帧内的一个对象的相应观看者改变为观看第二帧内的不同对象的实例的数量。该方法另外引起提供关于视频的第一帧和第二帧之间的观看行为的改变的信息。

技术领域

示例性实施例总体上涉及与视频相关的方法、装置和计算机可读存储介质，并且更具体地涉及用于应用视频观看行为的方法、装置和计算机可读存储介质。

背景技术

视频由多个连续的帧组成，这些帧可呈现例如一系列二维(2D)或三维(3D)图像。一些视频提供沉浸式内容，包括例如360度沉浸式多媒体图像。这样的沉浸式内容可用于包括例如虚拟现实系统的各种应用。由这样的360度图像提供的沉浸式多媒体内容通常限制观看者，以使观看者仅看到完整的360度视场的有限子集或部分。

观看者可平移通过场景，诸如通过在观看者利用头戴式显示器的实例中移动他们的头部或通过利用其他输入设备，诸如鼠标、键盘或触摸屏，滚动通过场景。即使观看者花费了平移通过场景所必需的努力，但因为360度视频具有非常大的视场，所以观看者可能会发现难以决定在视频的不同帧内在何处聚焦。因此，观看者可能不会(至少并非一致地)聚焦于视频的重要方面，诸如内容的创建者想让观看者沉迷的视频中的那些区域或视频中示出的对象。

发明内容

根据示例性实施例提供一种方法、装置和计算机程序产品，以便提供关于与视频的帧中包括的多个对象有关的视频的第一帧和第二帧之间的观看行为的改变的信息。基于关于视频的帧之间的观看行为的改变的信息，可在更知情的基础上进行一个或多个行动。例如，示例性实施例的方法、装置和计算机程序产品可至少部分地基于视频的帧之间的观看行为的改变来定义故事线。附加地或可替代地，示例性实施例的方法、装置和计算机程序产品可基于视频的帧之间的观看行为的改变来修改视频的一个或多个帧的图像质量。通过基于关于与视频的帧内包括的多个对象相关的视频的帧之间的观看行为的改变的信息来采取行动，可以有效地提高最终的用户体验。

在示例性实施例中，提供了一种方法，包括：对于包括第一帧和在第一帧之后的至少一个第二帧的视频的多个确定帧，标识包括在第一帧内的多个对象和包括在第二帧中的多个对象。该方法还确定包括在第一帧内的多个对象中的至少一个对象中的每个的多个观看者的第一观看次数。对于第二帧，该方法确定多个观看者对包括在第二帧内的多个对象中的至少一个对象中的每个的第二观看次数，并标识观看第一帧内的多个对象中的一个的相应观看者改变为观看第二帧内的多个对象中的不同的一个的多个实例。该方法另外包括提供关于与包括在视频中的多个对象相关的视频的第一帧和第二帧之间的观看行为的改变的信息。

示例性实施例的方法还包括至少部分地基于视频的第一帧和第二帧之间的观看行为的改变来定义故事线。在示例性实施例中，该方法可至少部分地基于从第一帧中的第一对象到第二帧中的第二对象的观看行为的改变来将故事线定义为聚焦于第一帧中的第一对象和第二帧中的第二对象。附加地或可替代地，示例性实施例的方法还包括至少部分地基于视频的第一帧和第二帧之间的观看行为的改变来修改至少第二帧的图像质量。在示例性实施例中，该方法可至少部分基于从第一帧中的第一对象到第二帧中的第二对象的观看行为的改变来修改第一对象和第二对象的图像质量。对于标识多个对象，示例性实施例的方法可在第二帧中标识比第一帧中更多的对象，例如在第一帧中的一个对象拆分成第二帧中的多个对象的实例中。可替代地，示例性实施例的方法可通过在第二帧中标识比在第一帧中更少的对象来标识多个对象，例如在第一帧中的多个对象合并成第二帧中的单个对象的实例中。