[发明专利]视频处理方法、装置及系统

说明书

本申请实施例提供了一种视频处理方法、装置及系统，该方法包括：解码第一视角覆盖的第一子图像的编码数据，从而得到第一子图像；在第一视角切换到第二视角时，获取第二视角覆盖的第二子图像的编码数据，以及第二子图像的第一参考图像的编码数据，第一参考图像的编码数据独立于第二子图像的编码数据所在的码流；解码第一参考图像的编码数据获得第一参考图像；根据第一参考图像解码第二子图像的编码数据，从而获得第二子图像。从而使终端在视角切换过程中，实现无缝切换，始终显示第二子图像所属的高质量层，有效提升了用户使用体验。

技术领域

本申请实施例涉及视频处理领域，尤其涉及一种视频处理方法、装置及系统。

背景技术

目前，在已有技术中，终端进行视频播放时，如果发生视角切换，则，可能出现由于切换时刻未到达新视角中的切片(Tile)对应的随机切入点，因此，导致终端无法对新的Tile进行解码，仅能暂时播放质量较低的数据层或出现黑屏，造成用户使用体验差的问题。

发明内容

本申请提供一种视频处理方法、装置及系统，能够在一定程度上避免视角切换过程中出现的低数据层，造成用户使用体验差的问题。

为达到上述目的，本申请采用如下技术方案：

第一方面，本申请实施例提供一种视频处理方法，所述方法包括：终端(或客户端，或解码端)解码第一视角覆盖的第一子图像的编码数据，从而得到第一子图像。随后，终端在第一视角切换到第二视角时，获取第二视角覆盖的第二子图像的编码数据，以及第二子图像的第一参考图像的编码数据，其中，第一参考图像的编码数据独立于第二子图像的编码数据所在的码流。接着，终端解码第一参考图像的编码数据获得第一参考图像。以及，终端可根据第一参考图像解码第二子图像的编码数据，从而获得第二子图像。

通过上述方式，实现了服务器端预先准备两个独立的码流，其中，包括包含第一参考图像的编码数据的码流以及包含第二子图像(和/或第一子图像)的编码数据的码流，以使终端在视角切换后，可基于第一参考图像对切换后的视角覆盖的第二子图像进行解码，从而获得第二子图像，使终端在视角切换过程中，实现无缝切换，终端的显示画面始终保持在第二子图像所属的高质量层，而不会在视角覆盖范围内出现低质量层或黑屏的现象，有效提升了用户使用体验。

在一种可能的实现方式中，第二子图像的编码数据所在的码流为第二子图像的编码数据所在的段(Segment)码流。

具体的，在本申请中，服务器与终端的交互过程中，是以码流的形式进行数据传输，可选地，码流可以为段码流，即，服务器将编码封装后的至少一个段码流发送给终端，以供终端进行解码与显示。

在一种可能的实现方式中，第二子图像为第二子图像的编码数据所在的码流所描述的图像序列中在解码顺序上的第一幅图像之外的图像，或者第二子图像为第二子图像的编码数据所在的码流所描述的图像序列中在解码顺序上的第一幅图像以及第二幅图像之外的图像。

通过上述方式，实现了当切换时刻为第二子图像的编码数据所在的码流所描述的图像序列中在解码顺序上的第二幅图像对应的播放时刻时，相应的，第一参考图像与第二子图像所依赖的参考图像(即，位于段码流首位的图像帧)所描述的图像一致。可选地，当切换时刻为除第一幅图像以及第二幅图像，例如：第三幅图像或第四幅图像等图像对应的播放时刻时，相应的，第一参考图像可以与第三副图像或第四幅图像所依赖的参考图像所描述的图像相同。

在一种可能的实现方式中，第一参考图像的图像内容与第二子图像的第二参考图像的图像内容相同，第二参考图像为第二子图像的编码数据所在的码流所描述的图像序列中的图像。

通过上述方式，实现了服务器端在编码时，基于相同的图像内容对第一参考图像与第二子图像进行编码。可选地，编码时的编码率可相同，可不同。

在一种可能的实现方式中，第二参考图像为第二子图像的编码数据所在的码流所描述的图像序列中在解码顺序上的第一幅图像之外的图像。