[发明专利]图像增强方法和装置、电子设备、存储介质

说明书

本申请实施例公开了一种图像增强方法和装置、电子设备、存储介质，其中，方法包括：对第一分辨率的第一格式图像进行去噪和超分辨率处理，获得第二分辨率的第一格式图像；对第二分辨率的第一格式图像进行去马赛克处理，获得第二分辨率的第二格式图像，通过神经网络的方法按上述顺序从第一格式图像端到端生成第二分辨率的第二格式图像，改变了传统图像处理中的去马赛克，去噪和超分辨率的顺序，解决了误差传递的问题，提高了图像的成像质量。

技术领域

本申请涉及计算机视觉技术，尤其是一种图像增强方法和装置、电子设备、存储介质。

背景技术

由于硬件成本限制，相机厂商大多采用单片传感器芯片，通过在传感器前置彩色滤波器(color filter array，CFA)来捕获图像。最为常见的CFA是Bayer型，经传感器得到的图像称为Bayer型图像。

发明内容

本申请实施例提供的一种图像增强技术。

根据本申请实施例的一个方面，提供的一种图像增强方法，包括：

对第一分辨率的第一格式图像进行去噪和超分辨率处理，获得第二分辨率的第一格式图像；

对所述获得的第二分辨率的第一格式图像进行去马赛克处理，获得第二分辨率的第二格式图像。

可选地，在本申请上述任一方法实施例中，所述对第一分辨率的第一格式图像进行去噪和超分辨率处理，获得第二分辨率的第一格式图像，包括：

利用联合去噪与超分网络，对所述第一分辨率的第一格式图像进行去噪和超分辨率处理，获得第二分辨率的第一格式图像。

可选地，在本申请上述任一方法实施例中，所述联合去噪与超分网络包括第一卷积块、至少两个深度残差块、上采样块和第二卷积块；

所述利用联合去噪与超分网络，对所述第一分辨率的第一格式图像进行去噪和超分辨率处理，获得第二分辨率的第一格式图像，包括：

基于所述第一卷积块对所述第一分辨率的第一格式图像进行处理，获得多通道特征图；

基于所述至少两个深度残差块对所述多通道特征图进行处理，获得处理后的多通道图像；

基于所述上采样块和第二卷积块对所述处理后的多通道图像进行处理，获得所述第二分辨率的第一格式图像。

可选地，在本申请上述任一方法实施例中，所述基于所述第一卷积块对所述第一分辨率的第一格式图像进行处理，获得多通道特征图，包括：

基于所述第一卷积块对所述第一分辨率的第一格式图像进行通道增加处理，获得多通道特征图。

可选地，在本申请上述任一方法实施例中，所述基于所述上采样块和第二卷积块对所述处理后的多通道图像进行处理，获得所述第二分辨率的第一格式图像，包括：

基于所述上采样块对所述处理后的多通道图像进行上采样，获得所述上采样后的多通道图像；

基于所述第二卷积块对所述上采样后的多通道图像进行通道缩减处理，获得减少通道数的所述第二分辨率的第一格式图像。

可选地，在本申请上述任一方法实施例中，所述对所述获得的第二分辨率图像进行去马赛克处理，获得第二分辨率的第二格式图像，包括：

利用去马赛克网络对所述获得的第二分辨率的第一格式图像进行去马赛克处理，获得第二分辨率的第二格式图像。

可选地，在本申请上述任一方法实施例中，在对第一分辨率的第一格式图像进行去噪和超分辨率处理，获得第二分辨率的第一格式图像之前，还包括：