[发明专利]用于处理视频的方法和装置

说明书

本公开实施例公开了用于处理视频的方法和装置。该方法的一具体实施方式包括：从待处理视频中获取包含预设帧数视频帧的视频帧序列；将上述视频帧序列输入预先训练的包括去噪网络、超分辨率重建网络和色彩增强网络的视频处理模型，以便上述视频处理模型执行以下操作：使用上述去噪网络对上述视频帧序列进行去噪处理，得到去噪后的特征信息；将上述特征信息分别输入上述超分辨率重建网络和上述色彩增强网络，分别得到超分辨率重建后的超分辨率视频帧序列和色彩增强后的色彩增强视频帧序列；根据上述超分辨率视频帧序列和上述色彩增强视频帧序列，生成处理后的视频帧序列。该实施方式实现了视频的高效处理。

技术领域

本公开实施例涉及计算机技术领域，具体涉及用于处理视频的方法和装置。

背景技术

随着信息技术的快速发展，用户存储和转发信息的形式也变得多样起来。例如，文字形式、图片形式和视频形式等等，其中，视频已经成为了用户生成内容的主要载体之一。由于用户录制视频的设备多种多样，录制环境纷繁复杂，因此，用户生成的视频可能会存在包含噪声、色彩不理想、传输所需网络带宽高、存储所需空间大等问题。实际应用中，视频超分辨率技术可以将低分辨率的视频转换成高分辨率的视频。视频服务可以传输和存储较低分辨率的视频，为用户播放时利用视频超分辨率技术呈现出高分辨率的视频。这样，在节省带宽和存储空间的同时，可以为用户提供优质的视频观看体验。现阶段，可以依次采用图像去噪方法、图像彩色增强方法和图像超分辨率方法等对视频逐帧进行处理，从而得到处理后的视频。但是，这种逐步对视频帧进行处理的方式视频处理速度慢，且效果不理想。

发明内容

本公开实施例提出了用于处理视频的方法和装置。

第一方面，本公开实施例提供了一种用于处理视频的方法，该方法包括：从待处理视频中获取包含预设帧数视频帧的视频帧序列；将上述视频帧序列输入预先训练的包括去噪网络、超分辨率重建网络和色彩增强网络的视频处理模型，以便上述视频处理模型执行以下操作：使用上述去噪网络对上述视频帧序列进行去噪处理，得到去噪后的特征信息；将上述特征信息分别输入上述超分辨率重建网络和上述色彩增强网络，分别得到超分辨率重建后的超分辨率视频帧序列和色彩增强后的色彩增强视频帧序列；根据上述超分辨率视频帧序列和上述色彩增强视频帧序列，生成处理后的视频帧序列。

在一些实施例中，上述视频处理模型是通过以下方式训练得到的：获取样本集，其中，样本包括样本视频帧序列和样本处理后视频帧序列；将上述样本集中的样本视频帧序列作为输入，将与输入的样本视频帧序列对应的样本处理后视频帧序列作为期望输出，训练得到上述视频处理模型。

在一些实施例中，在将上述样本集中的样本视频帧序列作为输入，将与输入的样本视频帧序列对应的样本处理后视频帧序列作为期望输出，训练得到上述视频处理模型之前，上述方法还包括：确定训练前的视频处理模型的初始参数。

在一些实施例中，上述确定训练前的视频处理模型的初始参数，包括：使用预设的第一样本集对上述去噪网络进行训练，将训练得到的去噪网络的参数作为第一初始参数，其中，上述第一样本集中的第一样本包括第一视频和第一视频对应的含噪声视频；使用预设的第二样本集对上述超分辨率重建网络进行训练，将训练得到的超分辨率重建网络的参数作为第二初始参数，其中，上述第二样本集中的第二样本为不同分辨率的视频对；使用预设的第三样本集对上述色彩增强网络进行训练，将训练得到的色彩增强网络的参数作为第三初始参数，其中，上述第三样本集中的第三样本为包含不同色彩特征的视频对；使用上述第一初始参数、上述第二初始参数和上述第三初始参数组成训练前的视频处理模型的初始参数。

在一些实施例中，上述根据上述超分辨率视频帧序列和上述色彩增强视频帧序列，生成处理后的视频帧序列，包括：对上述超分辨率视频帧序列和上述色彩增强视频帧序列进行对应位置相乘操作，得到处理后的视频帧序列。