[发明专利]图像处理方法及装置、非瞬态计算机可读存储介质

说明书

本公开提供了一种用于边缘设备的图像处理方法，其包括：对第一尺度的输入图像进行特征提取，以生成多个具有第一尺度的第一初始特征图；对多个第一初始特征图进行第一处理或第二处理，生成具有第二尺度的输出图像，第二尺度大于第一尺度；第一处理包括：将多个第一初始特征图划分为多个第一初始特征图组，对于每个第一初始特征图组，对第一初始特征图组中的多个第一初始特征图进行像素重排，以生成与第一初始特征图组对应的第一特征图，第一特征图具有第二尺度；对多个第一初始特征图组对应的第一特征图进行处理，生成输出图像。本公开还提供了一种图像处理装置、非瞬态计算机可读存储介质。

技术领域

本公开涉及显示技术领域，具体涉及一种图像处理方法、图像处理装置、非瞬态计算机可读存储介质。

背景技术

图像的超分辨率(Super Resolution，SR)重建目前已经成为图像处理领域的一个重要分支。目前，图像超分辨率重建的方法主要基于插值的方法和基于机器学习的方法。

发明内容

本公开提出了一种图像处理方法、图像处理装置、非瞬态计算机可读存储介质。

第一方面，本公开提供一种用于边缘设备的图像处理方法，包括：

对第一尺度的输入图像进行特征提取，以生成多个具有所述第一尺度的第一初始特征图；

对多个所述第一初始特征图进行第一处理或第二处理，生成具有第二尺度的输出图像，所述第二尺度大于所述第一尺度；

所述第一处理包括：

将多个所述第一初始特征图划分为多个第一初始特征图组，每个所述第一初始特征图组包括多个所述第一初始特征图，对于每个所述第一初始特征图组，对所述第一初始特征图组中的多个第一初始特征图进行像素重排，以生成与所述第一初始特征图组对应的第一特征图，所述像素重排后的第一特征图具有所述第二尺度；

利用预设的第一归一化规则对多个所述第一初始特征图组对应的第一特征图进行处理，生成所述输出图像；

所述第二处理包括：

利用预设的第二归一化规则对多个所述第一初始特征图进行处理，以生成多个具有第一尺度的第四特征图；

对多个所述第四特征图进行像素重排得到所述输出图像。

在一些实施例中，当所述图像处理方法包括对多个所述第一初始特征图进行所述第一处理时，利用预设的第一归一化规则对多个所述第一初始特征图组对应的第一特征图进行处理，生成所述输出图像，具体包括：

基于多个所述第一特征图中对应位置处的多个特征元素形成多个特征元素组；

基于每个特征元素组中的最大元素值，生成所述输出图像。

在一些实施例中，当所述图像处理方法包括对多个所述第一初始特征图进行第一处理时，所述第一处理还包括：

对所述输入图像进行卷积处理，以生成多个第二初始特征图组和多个第三初始特征图组，每个所述第二初始特征图组包括多个第二初始特征图，每个所述第三初始特征图组包括多个第三初始特征图，每个所述第二初始特征图和每个所述第三初始特征图均具有所述第一尺度；

对于任意一个所述第二初始特征图组，对所述第二初始特征图组中的多个第二初始特征图进行像素重排，以生成与所述第二初始特征图组对应的所述第二特征图；

对于任意一个第三初始特征图组，对所述第三初始特征图组中的多个第三初始特征图进行像素重排，以生成与所述第三初始特征图组对应的所述第三特征图；

利用预设的第一归一化规则对多个所述第一初始特征图组对应的第一特征图进行处理，生成所述输出图像，具体包括：