[发明专利]视频压缩处理方法、装置、存储介质和电子设备

说明书

本公开公开了一种视频压缩处理方法、装置、存储介质和电子设备，其中的视频压缩处理方法包括：确定当前帧图像以及历史帧图像的重建帧；通过第一神经网络模型对当前帧图像与历史帧图像的重建帧进行处理，获得当前帧图像的压缩数据以及当前帧图像的预测帧；根据当前帧图像的预测帧以及当前帧图像，确定当前帧图像对应的残差图像；通过第二神经网络模型对残差图像进行处理，获得残差图像的压缩数据以及当前帧图像对应的重建残差图像；根据当前帧图像的预测帧以及当前帧图像对应的重建残差图像，确定当前帧图像的重建帧。本公开提供的技术方案，能够降低训练优化难度，提高训练优化效率。

技术领域

本公开涉及视频处理技术领域，尤其涉及一种视频压缩处理方法、装置、存储介质和电子设备。

背景技术

随着视频数据在分辨率、帧率等方面的不断发展，视频压缩成为了视频传输、视频存储、视频广播等视频服务的基础。传统的视频压缩技术通常是使用高性能视频编码(HighEfficiency Video Coding，以下简称：HEVC)标准、H.264视频压缩编码标准、H.265视频压缩编码标准等提供的视频压缩处理框架。

相关技术中所使用的视频压缩处理框架内部，其中对视频帧图像进行压缩过程中，通常会使用独立的编码器和解码器，其中的编码器用于对视频帧图像进行压缩编码得到压缩数据，而解码器基于上述压缩数据得到预测帧或者重建帧。

发明人在实现本发明的过程中发现：上述相关的视频压缩处理框架由于不能够进行端到端的联合优化，存在无法提高整个视频压缩处理框架的压缩编码性能，进而提升视频压缩效率和准确率的缺陷。

发明内容

为了解决上述技术问题，提出了本公开。本公开的实施例提供了一种视频压缩处理方法、装置、存储介质和电子设备。

根据本公开的一个方面，提供了一种视频压缩处理方法，包括：

确定当前帧图像以及历史帧图像的重建帧，所述当前帧图像与所述历史帧图像之间距离N帧图像，N为正整数；

通过第一神经网络模型对所述当前帧图像与所述历史帧图像的重建帧进行处理，获得所述当前帧图像的压缩数据，以及所述当前帧图像的预测帧；

根据所述当前帧图像的预测帧以及所述当前帧图像，确定所述当前帧图像对应的残差图像；

通过第二神经网络模型对所述残差图像进行处理，获得所述残差图像的压缩数据以及所述当前帧图像对应的重建残差图像；

根据所述当前帧图像的预测帧以及所述当前帧图像对应的重建残差图像，确定当前帧图像的重建帧。

根据本公开的另一方面，提供了一种视频压缩处理装置，包括：

第一确定模块，用于确定当前帧图像以及历史帧图像的重建帧，所述当前帧图像与所述历史帧图像之间距离N帧图像，N为正整数；

第一压缩模块，用于通过第一神经网络模型对所述当前帧图像与所述历史帧图像的重建帧进行处理，获得所述当前帧图像的压缩数据，以及所述当前帧图像的预测帧；

第二确定模块，用于根据所述当前帧图像的预测帧以及所述当前帧图像，确定所述当前帧图像对应的残差图像；

第二压缩模块，用于通过第二神经网络模型对所述残差图像进行处理，获得所述残差图像的压缩数据以及所述当前帧图像对应的重建残差图像；

第三确定模块，用于根据所述当前帧图像的预测帧以及所述当前帧图像对应的重建残差图像，确定当前帧图像的重建帧。

根据本发明的再一个方面，提供了一种计算机可读存储介质，该存储介质存储有计算机程序，该计算机程序用于执行上述的视频压缩处理方法。

根据本发明的又一个方面，提供了一种电子设备，所述电子设备包括：