[发明专利]视频处理方法、装置、电子设备及计算机可读存储介质

说明书

本申请实施例提供了一种视频处理方法、装置、电子设备及计算机可读存储介质，涉及人工智能、云技术、计算机视觉和多媒体技术领域。该方法包括：通过对待处理视频进行划分，得到至少两个待处理的子视频。基于每个子视频与样本库中的各个种子样本的相似度，确定各子视频与样本库的匹配度；基于各子视频对应的匹配度，确定出各子视频中属于目标类型的候选子视频。通过多任务学习模型，确定每个候选子视频的类型预测结果；基于各候选子视频的类型预测结果，确定出各候选子视频中目标类型的目标子视频。基于各目标子视频中目标类型的视频片段，得到待处理视频对应的目标视频片段。本申请实施例可以快速、精确地确定出待处理视频中的目标视频片段。

技术领域

本申请涉及人工智能、云技术、计算机视觉和多媒体技术领域，具体而言，本申请涉及一种视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品。

背景技术

随着视频数量的爆发式增长，包括图像、视频在内的多媒体信息已经成为了人们生活不可或缺的一部分，浏览多媒体信息已经成为大部分互联网用户日常生活的一部分，会占据了用户较长的时间，尤其在观看比较长的视频时，需要耗费较长的时间。

为了更好的满足应用需求，节约用户浏览长视频所需的时间，可以通过从长视频中提取出相对精彩的片段(即精彩片段，highlight，高光片段、高亮片段)，并将确定好的精彩片段提供用户，使得可以通过观看相对精彩的片段获取到整个视频中的主要内容。目前，相关技术中，主要基于确定视频对应的响应度曲线的方式，或者通过对用户对视频的互动数据(例如，基于对视频的分享、点赞、评论等操作产生的数据)进行分析的方式，确定视频中相对精彩的片段。

但基于上述方式，通常依靠视频中的视觉信息来识别精彩片段，难以保证效果，且确定精彩片段的过程需要收集大量的用户数据，用户体验感不好，需要进行改进。

发明内容

本申请实施例提供了一种视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品，以更好的确定出待处理视频中的目标视频片段。

根据本申请实施例的一个方面，提供了一种视频处理方法，该方法包括：

获取待处理视频，通过对该待处理视频进行划分，得到至少两个待处理的子视频；

对于每个子视频，确定该子视频与样本库中的各个种子样本的相似度，基于该子视频对应的各相似度，确定该子视频与样本库的匹配度，其中，样本库中包括目标类型的多个种子样本，每个种子样本是包括图像、视频、文本或音频中的至少一种模态的数据；

基于各子视频对应的匹配度，确定出各子视频中属于目标类型的候选子视频；

对于每个候选子视频，通过训练好的多任务学习模型得到该候选子视频的类型预测结果；

基于各候选子视频的类型预测结果，确定出各候选子视频中目标类型的目标子视频；

对于每个目标子视频，确定该目标子视频中目标类型的视频片段；

基于各目标子视频中目标类型的视频片段，得到待处理视频对应的目标视频片段。

根据本申请实施例的另一个方面，提供了一种视频处理装置，该装置包括：

视频划分模块，用于获取待处理视频，通过对该待处理视频进行划分，得到至少两个待处理的子视频；

匹配度确定模块，用于对于每个子视频，确定该子视频与样本库中的各个种子样本的相似度，基于该子视频对应的各相似度，确定该子视频与样本库的匹配度，其中，样本库中包括目标类型的多个种子样本，每个种子样本是包括图像、视频、文本或音频中的至少一种模态的数据；

候选子视频确定模块，用于基于各子视频对应的匹配度，确定出各子视频中属于目标类型的候选子视频；