[发明专利]一种超分辨率重建方法、装置、设备和存储介质

说明书

本申请实施例公开了一种基于人工智能的超分辨率重建方法、装置、设备和存储介质，当需要对某个视频文件进行超分辨率重建时，获取第一分辨率的待处理视频帧序列，待处理视频帧序列即该视频文件的视频帧序列。针对待处理视频帧序列中每帧待处理视频帧，根据分辨率重建模型对待处理视频帧进行分辨率重建，得到第二分辨率的初始重建视频帧；第二分辨率高于第一分辨率。通过残差分离方式确定初始重建视频帧中的轮廓区域，对轮廓区域进行轮廓增强处理，得到目标重建视频帧，使得高频细节更加清晰，得到符合线上实际应用场景的画质最优结果，这样，根据目标重建视频帧生成第二分辨率的重建视频帧序列，可以为用户提供更加干净清晰、自然舒适的视频体验。

技术领域

本申请涉及图像处理领域，特别是涉及一种基于人工智能的超分辨率重建方法、装置、设备和存储介质。

背景技术

图像超分辨率是指对通过一幅或者多幅信息互补的低分辨率图像进行处理，重构出一幅高分辨率图像的技术，被广泛的应用在各种需要提升媒体数据（例如视频或图像）质量的领域，例如线上视频观看、医学影像、视频监控、遥感成像等领域。

相关技术中提出了基于深度学习的超分率重建方法，但是相关技术中的超分辨重建方法泛化效果差，面对线上的真实场景，得到的结果未必是画质最优的结果，往往不能取得令人满意的超分效果。

发明内容

为了解决上述技术问题，本申请提供了一种基于人工智能的超分辨率重建方法、装置、设备和存储介质，通过对模型输出的初始重建视频帧进行后处理，可以得到符合线上实际应用场景的画质最优结果，泛化效果更好，有利于提高用户的视频体验。

本申请实施例公开了如下技术方案：

一方面，本申请实施例提供一种基于人工智能的超分辨率重建方法，所述方法包括：

获取第一分辨率的待处理视频帧序列；

针对所述待处理视频帧序列中的每帧待处理视频帧，根据分辨率重建模型对所述待处理视频帧进行分辨率重建，得到第二分辨率的初始重建视频帧；所述第二分辨率高于所述第一分辨率；

通过残差分离方式确定所述初始重建视频帧中的轮廓区域；

对所述轮廓区域进行轮廓增强处理，得到目标重建视频帧；

根据所述目标重建视频帧生成第二分辨率的重建视频帧序列。

另一方面，本申请实施例提供一种基于人工智能的超分辨率重建装置，所述装置包括获取单元、重建单元、确定单元、处理单元和生成单元：

所述获取单元，用于获取第一分辨率的待处理视频帧序列；

所述重建单元，用于针对所述待处理视频帧序列中的每帧待处理视频帧，根据分辨率重建模型对所述待处理视频帧进行分辨率重建，得到第二分辨率的初始重建视频帧；所述第二分辨率高于所述第一分辨率；

所述确定单元，用于通过残差分离方式确定所述初始重建视频帧中的轮廓区域；

所述处理单元，用于对所述轮廓区域进行轮廓增强处理，得到目标重建视频帧；

所述生成单元，用于根据所述目标重建视频帧生成第二分辨率的重建视频帧序列。

另一方面，本申请实施例提供一种设备，所述设备包括处理器以及存储器：

所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；

所述处理器用于根据所述程序代码中的指令执行前述任一项所述的超分辨率重建方法。

另一方面，本申请实施例提供一种计算机可读存储介质，所述计算机可读存储介质用于存储程序代码，所述程序代码用于执行前述任一项所述的超分辨率重建方法。