[发明专利]一种视频识别方法、装置及电子设备

说明书

本申请实施例公开了一种视频识别方法、装置及电子设备，方法包括：获取目标视频，所述目标视频包括视频帧图像以及目标文本；调用第一图像特征提取模型提取所述视频帧图像的第一图像特征；调用第二图像特征提取模型提取所述视频帧图像的第二图像特征；调用第一文本特征提取模型提取所述目标文本的第一文本特征；调用第二文本特征提取模型提取所述目标文本的第二文本特征；根据所述第一图像特征、所述第二图像特征、所述第一文本特征和所述第二文本特征确定所述目标视频的视频标签，确定所述目标视频的视频标签属于所述第一分类任务。可以有效提升目标视频的视频标签识别过程的自动化以及智能化程度。

技术领域

本申请涉及计算机技术领域，尤其涉及一种视频识别方法、装置及电子设备。

背景技术

随着计算机技术的发展，电子设备也日益普及。电子设备上具有大量的视频播放平台，提供的海量视频，丰富了人们的日常生活。但是视频中含有的内嵌广告却严重影响了人们的观看体验。

目前在对视频进行识别时，以视频中的内嵌广告为例。针对未对内嵌广告进行标注的视频，可以通过众包的方式对视频的内嵌广告过滤。即把过滤广告任务发布到视频平台，让用户标注，并给用户一定物质奖励。但通过人工的方式无法实现设备自动智能化筛选视频的广告片段，导致广告片段识别的自动化程度低下。

发明内容

本申请实施例提供了一种视频识别方法、装置及电子设备。可以有效提升目标视频的视频标签识别过程的自动化以及智能化程度。

一方面，本申请实施例提供了一种视频识别方法，所述方法包括：

获取目标视频，所述目标视频包括视频帧图像以及目标文本；

调用第一图像特征提取模型提取所述视频帧图像的第一图像特征；所述第一图像特征提取模型是基于第一分类任务训练的图像特征提取模型；

调用第二图像特征提取模型提取所述视频帧图像的第二图像特征；所述第二图像特征提取模型是基于所述第一分类任务和第二分类任务训练的图像特征提取模型；

调用第一文本特征提取模型提取所述目标文本的第一文本特征；所述第一文本特征提取模型是基于所述第一分类任务训练的文本特征提取模型；

调用第二文本特征提取模型提取所述目标文本的第二文本特征；所述第二文本特征提取模型是基于所述第一分类任务和第三分类任务训练的文本特征提取模型；

根据所述第一图像特征、所述第二图像特征、所述第一文本特征和所述第二文本特征确定所述目标视频的视频标签，确定所述目标视频的视频标签属于所述第一分类任务。

一方面，本申请实施例提供了一种视频识别装置，所述装置包括：

获取单元，用于获取目标视频，所述目标视频包括视频帧图像以及目标文本；

处理单元，用于调用第一图像特征提取模型提取所述视频帧图像的第一图像特征；所述第一图像特征提取模型是基于第一分类任务训练的图像特征提取模型；

所述处理单元，还用于调用第二图像特征提取模型提取所述视频帧图像的第二图像特征；所述第二图像特征提取模型是基于所述第一分类任务和第二分类任务训练的图像特征提取模型；

所述处理单元，还用于调用第一文本特征提取模型提取所述目标文本的第一文本特征；所述第一文本特征提取模型是基于所述第一分类任务训练的文本特征提取模型；

所述处理单元，还用于调用第二文本特征提取模型提取所述目标文本的第二文本特征；所述第二文本特征提取模型是基于所述第一分类任务和第三分类任务训练的文本特征提取模型；

确定单元，用于根据所述第一图像特征、所述第二图像特征、所述第一文本特征和所述第二文本特征确定所述目标视频的视频标签，确定所述目标视频的视频标签属于所述第一分类任务。