[发明专利]视频处理方法、视频处理装置及存储介质

说明书

本公开是关于一种视频处理方法、视频处理装置及存储介质。视频处理方法包括：在具有第一宽高比的源视频中提取多个视频帧；对所述多个视频帧中的每一视频帧分别进行多次裁剪，以生成具有第二宽高比的多个候选裁剪框；对所述多个视频帧中每一视频帧的多个候选裁剪框分别确定评分，所述评分表征所述视频帧以每一候选裁剪框为裁剪范围时的播放效果，并基于所述评分在所述多个候选裁剪框中选择出每一视频帧的裁剪框；对每一视频帧使用选择出的所述裁剪框进行裁剪，并生成具有所述第二宽高比的目标视频。通过本公开，能够实现将源视频按照目标宽高比输出，并能保证输出内容的播放效果。

技术领域

本公开涉及图像视频处理技术领域，尤其涉及一种视频处理方法、视频处理装置及存储介质。

背景技术

源视频的宽高比和视频当前播放设备显示器的宽高比会出现不一致的情形。例如，用户拍摄、网上下载等来源的视频通常有多种宽高比，而用户的播放设备的显示器也有多种宽高比。若源视频的宽高比和目标显示器的宽高比不一致，在目标显示器上播放视频时(如在宽高比为16:9的目标显示器上播放宽高比为4:3的视频)，显示器的两侧将出现大块黑幕。

相关技术中，为使源视频播放的宽高比与播放设备显示器的宽高比相匹配，使视频画面填满显示器以提供更好的用户体验，通常需要对视频画面进行缩放或裁剪。

发明内容

为克服相关技术中存在的问题，本公开提供一种视频处理方法、视频处理装置及存储介质。

根据本公开实施例的第一方面，提供一种视频处理方法，包括：

在具有第一宽高比的源视频中提取多个视频帧；对所述多个视频帧中的每一视频帧分别进行多次裁剪，以生成具有第二宽高比的多个候选裁剪框；对所述多个视频帧中每一视频帧的多个候选裁剪框分别确定评分，所述评分表征所述视频帧以每一候选裁剪框为裁剪范围时的播放效果，并基于所述评分在所述多个候选裁剪框中选择出每一视频帧的裁剪框；对每一视频帧使用选择出的所述裁剪框进行裁剪，并生成具有所述第二宽高比的目标视频。

一种实施方式中，对所述候选裁剪框确定评分，包括：

对所述候选裁剪框内的图像内容进行美学打分，得到所述候选裁剪框的评分。

另一种实施方式中，对所述候选裁剪框确定评分，包括：

针对所述候选裁剪框中的每一像素进行显著性目标检测，并基于显著性目标检测结果确定每一像素的像素评分；根据所述候选裁剪框中各像素的像素评分，确定所述候选裁剪框的评分。

又一种实施方式中，基于所述评分在所述多个候选裁剪框中选择出每一视频帧的裁剪框，包括：

针对所述多个视频帧中的每一视频帧，基于每两个候选裁剪框之间的位置，构建状态转移矩阵，所述状态转移矩阵用于对每一视频帧所选择的候选裁剪框在相邻各帧间的抖动进行平滑控制；基于最大目标函数，利用所述状态转移矩阵以及各候选裁剪框的评分，确定满足最大裁剪框评分的裁剪框序列，所述裁剪框序列中包括每一视频帧中所选择的候选裁剪框。

又一种实施方式中，基于每两个候选裁剪框之间的位置，构建状态转移矩阵，包括：

基于每两个候选裁剪框之间的交并比以及系数乘子，构建状态转移矩阵，所述系数乘子用于控制平滑程度大小。

又一种实施方式中，基于每两个候选裁剪框之间的位置，构建状态转移矩阵，包括：

基于每相邻两个候选裁剪框的中心位置之间的欧式距离、候选裁剪框的面积，以及系数乘子，构建状态转移矩阵，所述系数乘子用于控制平滑程度大小。

又一种实施方式中，选择出每一视频帧的裁剪框之后，所述方法还包括：