[发明专利]全景视频图像处理方法、服务端、目标设备、装置和系统

说明书

本发明提供了全景视频图像处理方法、服务端、目标设备、装置和系统，该方法应用于服务端且包括：获取待处理的全景视频图像，该全景视频图像包括热点区域；对全景视频图像进行预处理以得到预处理图像，其中，预处理包括将全景视频图像划分为多个图像区块以及根据各个图像区块和热点区域之间的距离分别对各个图像区块进行缩放处理；对预处理图像进行编码处理，得到编码数据；将编码数据传送到目标终端。利用上述方法，可以在保证用户感兴趣的热点区域的画面分辨率的前提下，无需对常规编码器进行额外修改，即可减小视频数据传输所导致的带宽压力。

技术领域

本发明属于视频处理领域，具体涉及全景视频图像处理方法、服务端、目标设备、装置和系统。

背景技术

本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

全景视频图像的出现给消费者带来了更好的视觉体验。全景视频播放设备以4K分辨率为主，常见设备为头显，手机等。目前，受限于全景视频播放设备的视频解码、渲染能力及传输过程中的带宽，全景视频点播/直播大多数使用8M～10M码率的4K分辨率的视频。视频码率对于视频的质量有很大的影响，在一定范围内，视频的码率越高，视频画面质量越好。但是由于用户所使用的带宽环境及部分平台节省带宽的需求，全景视频的码率通常被压缩到了无法支持4K分辨率的码率水平。此外，用户在全景视频播放设备观看时，由于受限于视野范围，用户观看到的画面仅占整个视频画面的一部分，用户会感觉到十分模糊,无法体现4K分辨率的优势。因此，在码率及分辨率不足的情况下，用户使用全景视频播放设备观看全景视频的体验需要改进。

发明内容

针对上述现有技术中存在的问题，提出了全景视频图像处理方法、服务端、目标设备、系统、装置及计算机可读存储介质，利用这种方法、装置及计算机可读存储介质，能够解决上述问题。

本发明提供了以下方案。

第一方面，提供一种全景视频图像处理方法，应用于服务端，包括：获取待处理的全景视频图像，所述全景视频图像包括热点区域；对所述全景视频图像进行预处理以得到预处理图像，其中，所述预处理包括：将所述全景视频图像划分为多个图像区块，以及根据各个所述图像区块和所述热点区域之间的距离分别对各个所述图像区块进行缩放处理；对所述预处理图像进行编码处理，得到编码数据；将所述编码数据传送到目标终端。

在一种可能的实施方式中，预处理进一步包括：基于热点区域确定目标注视方向，根据目标注视方向和人眼视野角范围将全景视频图像划分为多个图像区块；以及，根据各个图像区块对应的注视方向和目标注视方向之间的角度差对各个图像区块进行缩放处理。

在一种可能的实施方式中，预处理进一步包括：垂直于球面型的全景视频图像的中心纵向截面对全景视频图像进行第一类划分，获得多个第一图像区块，第一类划分采用的多个第一类划分线在中心纵向截面上的投影汇总于中心点且彼此之间按照第一预设角度分隔开；根据各个第一图像区块对应的第一类划分线和目标注视方向之间的角度差分别对各个第一图像区块的高度尺寸进行高度缩放处理；其中，目标注视方向指向全景视频图像的中心纵向截面和中心横向截面的交点。

在一种可能的实施方式中，预处理进一步包括：垂直于球面型的全景视频图像的中心横向截面对全景视频图像进行第二类划分，获得多个第二图像区块，第二类划分采用的多个第二类划分线在全景视频图像的中心横向截面上的投影汇总于中心点且彼此之间按照第二预设角度分隔开；根据各个第二图像区块对应的第二类划分线和热点区域之间的角度差分别对各个第一图像区块的宽度尺寸进行缩放处理，其中，目标注视方向指向全景视频图像的中心纵向截面和中心横向截面的交点。