[发明专利]视频剪裁方法及装置

权利要求书

1.一种视频剪裁方法，其特征在于，所述方法包括：

获得待剪裁帧集合，其中，所述待剪裁帧集合是在对待剪裁视频包含的各个视频帧进行场景划分后获得的；

将所述待剪裁帧集合中的第一个视频帧作为关键视频帧，并基于所述关键视频帧确定至少一个目标对象；所述目标对象包括目标主体；

逐一在所述关键视频帧之后的各个视频帧中，对所述目标主体进行检测，直至检测到不包含所述目标主体的截止视频帧时，将所述关键视频帧与所述截止视频帧之间的各个视频帧，作为所述关键视频帧对应的各个追踪视频帧；

将所述截止视频帧作为所述待剪裁帧集合中的下一个关键视频帧，并返回执行所述基于所述关键视频帧确定至少一个目标对象及后续步骤；

基于所述至少一个目标对象，分别对所述关键视频帧和所述各个追踪视频帧进行剪裁，获得由剪裁后的各个目标视频帧组成的目标帧集合；所述目标视频帧中包含所述至少一个目标对象；

基于所述目标帧集合，生成剪裁后的目标视频。

2.根据权利要求1所述的方法，其特征在于，所述获得待剪裁帧集合，包括：

将待剪裁视频包含的各个视频帧，输入已训练的场景边界检测模型，得到至少一个场景边界帧，每个场景边界帧为与相邻的后一个视频帧的相似度小于设定阈值的视频帧；

针对所述至少一个场景边界帧，分别执行如下操作：将所述至少一个场景边界帧中的一个场景边界帧，与相邻的前一个场景边界帧之间的所有视频帧，归属至同一个帧集合；

从获得的至少一个帧集合中确定出待剪裁帧集合。

3.根据权利要求1所述的方法，其特征在于，所述目标对象包括目标主体和相邻主体；所述基于所述关键视频帧确定至少一个目标对象，包括：

对所述关键视频帧进行目标检测，得到多个候选对象，并确定所述多个候选对象在相邻视频帧中与画面中心位置之间的距离；所述相邻视频帧为与所述关键视频帧相邻的视频帧；

按照距离由近到远的顺序，对各个候选对象进行排序，将距离最近的候选对象作为所述关键视频帧对应的目标主体，并从剩余的候选对象中选择前N个候选对象作为所述关键视频帧对应的相邻主体。

4.根据权利要求3所述的方法，其特征在于，所述确定所述多个候选对象在相邻视频帧中与画面中心位置之间的距离，包括：

通过已训练的主体选择模型，确定各个候选对象的主体概率值；所述主体概率值用于表征对应的候选对象在相邻视频帧中与画面中心位置之间的距离；所述主体选择模型是采用已标注候选对象的样本图像序列进行训练得到的；所述已标注候选对象具有根据在样本图像中与画面中心位置之间的距离进行标注的主体标签；所述主体标签用于表征对应的已标注候选对象为目标主体或相邻主体。

5.根据权利要求1所述的方法，其特征在于，所述逐一在所述关键视频帧之后的各个视频帧中，对所述目标主体进行检测，包括：

针对所述各个视频帧中的每一个视频帧，分别执行如下操作：

对所述各个视频帧中的一个视频帧进行目标检测，获得至少一个候选对象；

将所述目标主体与所述至少一个候选对象分别进行匹配；

若所述至少一个候选对象中包括所述目标主体，则确定所述一个视频帧包含所述目标主体。

6.根据权利要求5所述的方法，其特征在于，所述确定所述一个视频帧包含所述目标主体之后，所述方法还包括：

在所述一个视频帧中，分别确定除所述目标主体之外的各个候选对象与所述目标主体之间的距离；

将与所述目标主体之间的距离小于设定距离阈值的候选对象，作为所述一个视频帧中的相邻主体。