[发明专利]多视点视频数据处理方法、设备及存储介质

说明书

本发明公开了多视点视频数据处理方法、设备及存储介质，该方法包括：显示设备的视点发生切换时，显示设备将切换的目标视点发送给解码设备，解码设备为显示设备提供由从图像帧序列中的从图像帧中截取的目标视点对应的从视点的图像，以供显示设备显示低分辨率的目标视点的视点画面，在满足画面切换条件时，显示设备向解码设备发送画面切换条件满足指令，解码设备根据画面切换条件满足指令为显示设备提供目标视点对应的主图像帧序列中的图像和/或由从图像帧中截取的目标视点对应的从视点的图像，以供显示设备显示高分辨率的目标视点的视点画面。本发明实现了在视点切换后快速将视频从低分辨恢复至高分辨率，保障了长时间观看视频时的清晰度。

技术领域

本发明涉及视频处理技术领域，尤其涉及一种多视点视频数据处理方法、设备及存储介质。

背景技术

自由视点技术是一种实现自由视角观看视频的技术。目前的应用自由视点技术的自由视点应用可以允许观看者在一定范围内以连续视点的形式观看视频。观看者可以设定视点的位置、角度，而不再局限于只能观看一个固定的摄像机视角拍摄的视频，实现了360°自由视角观看视频。

目前的自由视点应用往往使用空域拼接方法将多个视点的单路视频拼接在一起，当用户在自由视点应用端的进行视点切换时，自由视点应用通过拼接在一起的多个视点的单路视频为用户显示所切换视点对应的单路视频。但是，使用空域拼接方法对多个视点的单路视频拼接之后，导致各个视点的单路视频的分辨率下降，从而造成自由视点应用显示所需的画面分辨率不足，导致最终生成的视点画面分辨率不高。

发明内容

本申请实施例通过提供一种多视点视频数据处理方法、设备及存储介质，旨在解决使用空域拼接方法对多个视点的单路视频拼接之后，导致各自由视点应用显示所需的画面分辨率不足，进而导致最终生成的视点画面分辨率不高的技术问题。

本申请实施例提供了一种多视点视频数据处理方法，其特征在于，应用于解码设备，所述多视点视频数据处理方法包括：

接收到显示设备发送的显示指令时，获取所述显示指令对应的当前视点；

发送所述显示设备显示所述当前视点对应的当前视点画面所需的第一视频数据至所述显示设备；所述第一视频数据包括由所述当前视点对应的主传输路径接收到的主图像帧序列中的图像和/或由从传输路径接收到的从图像帧序列中的从图像帧中截取的所述当前视点对应的从视点的图像，所述主图像帧序列中的图像和所述从图像帧中的图像均包括视点画面和/或视点深度图画面，且所述主图像帧序列中的图像的分辨率大于所述从图像帧中的图像的分辨率；

接收到所述显示设备发送的视点切换指令时，获取所述视点切换指令对应的目标视点；

发送所述显示设备显示所述目标视点对应的第一目标视点画面所需的第二视频数据至所述显示设备；所述第二视频数据包括由所述从图像帧序列中的从图像帧中截取的所述目标视点对应的从视点的图像；

接收到所述显示设备发送的画面切换条件满足指令时，发送所述显示设备显示所述目标视点对应的第二目标视点画面所需的第三视频数据至所述显示设备；所述第三视频数据包括由所述目标视点对应的主传输路径接收到的主图像帧序列中的图像和/或由所述从图像帧序列中的从图像帧中截取的所述目标视点对应的从视点的图像。

在一实施例中，所述发送所述显示设备显示所述当前视点对应的当前视点画面所需的第一视频数据至所述显示设备的步骤之前，还包括：

获取所述当前视点对应的从视点的视点标识以及所述从图像帧序列的排布信息；

根据所述排布信息以及所述视点标识确定所述当前视点对应的从视点的图像在所述从图像帧中的位置信息；

由所述从图像帧序列中的从图像帧中截取所述位置信息对应的图像。

在一实施例中，所述发送所述显示设备显示所述当前视点对应的当前视点画面所需的第一视频数据至所述显示设备的步骤包括：