[发明专利]基于脸部的图像重建方法、装置、电子设备及存储介质

说明书

本发明实施例提供了一种基于脸部的图像重建方法、装置、电子设备及存储介质，涉及图像处理技术领域，方法包括：获取脸部图像；对脸部图像进行多次图像超分辨率重建，直至生成符合预设图像尺寸的重建后图像，作为目标超分图像；通过以下方式对脸部图像或进行图像超分辨率重建后不符合预设图像尺寸的重建后图像进行图像超分辨率重建：对脸部图像或重建后图像进行特征提取，得到脸部特征图；对脸部特征图进行上采样，得到脸部上采样图，脸部上采样图的尺寸大于脸部特征图的尺寸；对脸部上采样图进行脸部边缘估计，得到脸部边缘图；对脸部边缘图与脸部上采样图进行融合，得到重建后图像。应用本发明实施例提供的方案能够提升脸部图像的重建效果。

技术领域

本发明涉及图像处理技术领域，特别是涉及一种基于脸部的图像重建方法、装置、电子设备及存储介质。

背景技术

高分辨率脸部图像涵盖着丰富的信息，已被广泛地用于视频监控、影像恢复以及脸部识别等领域中。一般来讲，只要是涉及图片质量及识别等场景均可用到高分辨率脸部图像，例如以图搜剧、脸部识别等场景。基于此，如何对脸部图像进行重建，得到高分辨率图像成为了需要解决的问题。

现阶段，FSRNet(Face Super-Resolution Net，脸部超分辨率网络)技术在脸部图像超分辨率重建中成功应用，引入先验信息来提升特征提取能力，使得基于先验信息的脸部图像超分辨率重建逐渐被广大学者采纳。

目前，基于先验信息的脸部图像超分辨率重建研究已有一定的发展，初步实现了低分辨率脸部图像的重建，但是目前所选取的先验信息仍然不能很好的表征脸部信息。现有技术中，面部解析图作为一种常见的先验信息，其往往会造成面部组件脱节，所以面部解析图面部组件的内部几何结构的效果较差。因此，脸部图像的重建效果较差。

发明内容

本发明实施例的目的在于提供一种基于脸部的图像重建方法、装置、电子设备及存储介质，以提升脸部图像的重建效果。具体技术方案如下：

在本发明实施的第一方面，首先提供了一种基于脸部的图像重建方法，所述方法包括：

获取脸部图像；

对所述脸部图像进行多次图像超分辨率重建，直至生成符合预设图像尺寸的重建后图像，该符合预设图像尺寸的重建后图像即为目标超分图像；

通过以下方式对所述脸部图像或进行图像超分辨率重建后不符合预设图像尺寸的重建后图像进行图像超分辨率重建：

对所述脸部图像或重建后图像进行特征提取，得到脸部特征图；

对所述脸部特征图进行上采样，得到脸部上采样图，所述脸部上采样图的尺寸大于所述脸部特征图的尺寸；

对所述脸部上采样图进行脸部边缘估计，得到脸部边缘图；

对所述脸部边缘图与所述脸部上采样图进行融合，得到重建后图像。

本发明的一个实施例中，在每一次图像超分辨率重建的过程中，所述对所述脸部上采样图进行脸部边缘估计，得到脸部边缘图，包括：

基于预设的高斯核，对所述脸部上采样图进行脸部边缘估计，得到脸部边缘图；

在每一次图像超分辨率重建过程中使用的高斯核的尺寸大于上一次图像超分辨率重建过程中使用的高斯核的尺寸。

本发明的一个实施例中，所述对所述脸部上采样图进行脸部边缘估计，得到脸部边缘图，包括：

对所述脸部上采样图进行特征提取，得到特征提取图；

对所述特征提取图进行归一化，得到归一化图像；

对所述归一化图像进行去线性化，得到去线性化图像；