[发明专利]视频的插帧方法、装置、电子设备和存储介质

说明书

本申请公开了视频的插帧方法、装置、电子设备和存储介质，涉及计算机技术领域，具体涉及计算机视觉和深度学习等人工智能技术领域。具体实现方案为：获取视频；获取视频之中的第i‑1帧图像和第i帧图像，其中，i为正整数；分别获取第i‑1帧图像和第i帧图像的视觉语义特征图和深度信息图；根据第i‑1帧图像和第i帧图像的视觉语义特征图和深度信息图生成插帧信息；以及根据插帧信息和第i‑1帧图像生成第i‑1帧图像和第i帧图像之间的插帧，并插入第i‑1帧图像和第i帧图像之间。该方法根据视频之中帧图像的视觉语义特征图和深度信息图对视频进行插帧，计算效率较高，且可以处理遮挡及画面变化较大的情况，从而有效的提高了插帧效果。

技术领域

本申请涉及计算机技术领域，具体涉及计算机视觉和深度学习等人工智能技术领域，尤其涉及一种视频的插帧方法、装置、电子设备和存储介质。

背景技术

随着移动互联网的兴起，用户存储和转发信息的方式逐渐从文字、图片过渡到视频。如今视频已经成为用户生成内容的主要载体。然而，受到拍摄设备的制约，绝大部分用户只能拍摄帧率为(24-30fps)的视频，与高帧率(60，120fps)视频观感体验差距很大。

目前视频插帧技术可以在视频帧之间插入中间帧，增加视频帧率，使视频观看起来更加顺畅，减少跳跃，抖动等现象，极大提升用户体验。

发明内容

本申请提供了一种视频的插帧方法、装置、电子设备和存储介质。

根据本申请的一方面，提供了一种视频的插帧方法，包括：

获取视频；

获取所述视频之中的第i-1帧图像和第i帧图像，其中，i为正整数；

分别获取所述第i-1帧图像和所述第i帧图像的视觉语义特征图和深度信息图；

根据所述第i-1帧图像和所述第i帧图像的视觉语义特征图和深度信息图生成插帧信息；以及

根据所述插帧信息和所述第i-1帧图像生成所述第i-1帧图像和所述第i帧图像之间的插帧，并插入所述第i-1帧图像和所述第i帧图像之间。

根据本申请的另一方面，提供了一种视频的插帧装置，包括：

第一获取模块，用于获取视频；

第二获取模块，用于获取所述视频之中的第i-1帧图像和第i帧图像，其中，i为正整数；

第三获取模块，用于分别获取所述第i-1帧图像和所述第i帧图像的视觉语义特征图和深度信息图；

第一生成模块，用于根据所述第i-1帧图像和所述第i帧图像的视觉语义特征图和深度信息图生成插帧信息；以及

插帧模块，用于根据所述插帧信息和所述第i-1帧图像生成所述第i-1帧图像和所述第i帧图像之间的插帧，并插入所述第i-1帧图像和所述第i帧图像之间。

根据本申请另一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述一方面实施例所述的视频的插帧方法。

根据本申请另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其上存储有计算机程序，所述计算机指令用于使所述计算机执行上述一方面实施例所述的视频的插帧方法。

根据本申请的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现上述一方面实施例所述的视频的插帧方法。