[发明专利]一种超分辨率重建方法、装置、设备和存储介质

权利要求书

1.一种基于人工智能的超分辨率重建方法，其特征在于，所述方法包括：

获取第一分辨率的待处理视频帧序列；

针对所述待处理视频帧序列中的每帧待处理视频帧，根据分辨率重建模型对所述待处理视频帧进行分辨率重建，得到第二分辨率的初始重建视频帧；所述第二分辨率高于所述第一分辨率；

通过残差分离方式确定所述初始重建视频帧中的轮廓区域；通过残差分离方式确定所述初始重建视频帧中的轮廓区域，包括：针对所述待处理视频帧序列中的每帧待处理视频帧，通过双三次插值得到双三次插值放大结果；根据所述初始重建视频帧和所述双三次插值放大结果生成混合残差，以及根据所述双三次插值放大结果和高斯低通滤波结果生成高通残差；根据所述混合残差和所述高通残差得到高频掩膜；根据所述初始重建视频帧、所述双三次插值放大结果和所述高频掩膜确定所述轮廓区域；

对所述轮廓区域进行轮廓增强处理，得到目标重建视频帧；

根据所述目标重建视频帧生成第二分辨率的重建视频帧序列。

2.根据权利要求1所述的方法，其特征在于，所述通过残差分离的方式确定所述初始重建视频帧中的轮廓区域，包括：

通过所述残差分离方式确定所述初始重建视频帧中的轮廓区域和平坦区域；

所述对所述轮廓区域进行轮廓增强处理，得到目标重建视频帧，包括：

对所述轮廓区域进行轮廓增强处理，并对所述平坦区域进行去噪处理，得到目标重建视频帧。

3.根据权利要求2所述的方法，其特征在于，所述平坦区域的确定方式为：

根据所述混合残差和所述高通残差得到低频掩膜；

根据所述初始重建视频帧、所述双三次插值放大结果和所述低频掩膜确定所述平坦区域。

4.根据权利要求1所述的方法，其特征在于，所述获取第一分辨率的待处理视频帧序列，包括：

获取视频播放指令；

根据所述视频播放指令获取视频文件并播放；

当检测到所述视频文件的分辨率切换指令时，获取所述视频文件的视频帧序列作为第一分辨率的待处理视频帧序列。

5.根据权利要求1所述的方法，其特征在于，所述根据所述目标重建视频帧生成第二分辨率的重建视频帧序列之后，还包括：

确定当前播放视频帧的下一视频帧；

在所述重建视频帧序列中确定所述下一视频帧对应的目标重建视频帧；

当播放下一视频帧时，切换至所述下一视频帧对应的目标重建视频帧，播放所述重建视频帧序列中的目标重建视频帧。

6.根据权利要求1所述的方法，其特征在于，所述分辨率重建模型是根据以下步骤训练得到的：

对采集到的原始视频样本进行降采样处理和视频压缩处理，得到目标视频样本；所述原始视频样本的分辨率高于预设阈值；

根据所述目标视频样本确定低分辨率样本集，所述低分辨率样本集中包括所述目标视频样本中处于预设帧位置的多帧第一图像；

对所述原始视频样本中处于所述预设帧位置的多帧第二图像进行轮廓增强处理，得到高分辨率样本集；所述高分辨率样本集中包括多帧第三图像，所述多帧第三图像是对所述多帧第二图像进行轮廓增强处理后得到的图像；

根据所述低分辨率样本集和所述高分辨率样本集构造训练数据集；

根据所述训练数据集，对所述分辨率重建模型进行训练。

7.根据权利要求6所述的方法，其特征在于，所述根据所述低分辨率样本集和所述高分辨率样本集构造训练数据集，包括：

按照第一尺寸对所述多帧第三图像分别进行分割，得到标签图；以及按照第二尺寸对所述多帧第一图像分别进行分割，得到输入图像；

针对所述多帧第三图像中每帧第三图像对应的标签图，从所述标签图中确定属于所述第三图像的平坦区域的目标标签图；

剔除所述目标标签图以及与所述目标标签图对应的输入图像。