[发明专利]基于参考池匹配的视频超分方法

权利要求书

1.基于参考池匹配的视频超分方法，其特征在于，包括如下步骤：

S1，收集和整理视频图像数据集，构建训练集和测试集；

S2，对高清参考帧和低清输入帧进行预处理，将低清输入帧进行上采样，对高清参考帧先进行下采样后再上采样；

S3，建立特征提取网络，将经过预处理的高清参考帧和低清输入帧输入所述特征提取网络；

S4，初始化参考池，将由所述特征提取网络输出的高清参考帧的特征作为参考池的初始特征；

S5，建立特征搜索匹配网络，将低清输入帧特征与参考池特征输入所述特征搜索匹配网络，计算相关性系数，得到最大相关性系数/坐标列表；

S6，更新参考池；

S7，通过相关性感知融合网络，重建恢复出高清帧图像。

2.根据权利要求1所述的基于参考池匹配的视频超分方法，其特征在于，所述步骤S2中，对低清输入帧上采样同时，对高清参考帧也要先下采样后再上采样，所述下采样及上采样均采用双三次插值法。

3.根据权利要求1所述的基于参考池匹配的视频超分方法，其特征在于，所述步骤S3中，所述特征提取网络包括三个卷积层，所述高清参考帧和低清输入帧经过所述三个卷积层提取得到三个层次的特征，这三个层次的特征的视觉模式不同，第一层次的特征是用于提供高频信息的关键特征，第二层次的特征是用于后续恢复重建高清帧，第三层次的特征是用于匹配查询特征。

4.根据权利要求1所述的基于参考池匹配的视频超分方法，其特征在于，所述步骤S5中，采用h×w滑动窗口将所有特征进行分块拼接，分别得到低清输入帧特征矩阵和参考池特征矩阵并计算相关性。

5.根据权利要求4所述的基于参考池匹配的视频超分方法，其特征在于，所述步骤S5中，h＝w＝3，步长为1。

6.根据权利要求1所述的基于参考池匹配的视频超分方法，其特征在于，所述步骤S6中，更新参考池的更新规则为：参考最大相关性列表，筛选出若干个值最小的相关性值，然后根据相关性位置坐标列表从重建恢复出的高清帧中索引出这些相关性值对应的特征作为更新特征，输入参考池。