[发明专利]重复视频的识别方法、设备、储存介质及计算机程序产品在审
申请号: | 202110521581.3 | 申请日: | 2021-05-13 |
公开(公告)号: | CN115346145A | 公开(公告)日: | 2022-11-15 |
发明(设计)人: | 任晖 | 申请(专利权)人: | 北京字跳网络技术有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/74;G06V10/82;G06N3/04;G06N3/08;G10L25/30;G10L25/57 |
代理公司: | 上海光栅知识产权代理有限公司 31340 | 代理人: | 乔慧;马雯雯 |
地址: | 100190 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 重复 视频 识别 方法 设备 储存 介质 计算机 程序 产品 | ||
本公开实施例提供一种重复视频的识别方法、设备、储存介质及计算机程序产品,通过对第一视频提取第一多模态数据,对第二视频提取第二多模态数据,第一多模态数据和第二多模态数据均包括至少两种相同种类的模态数据;分别提取各模态数据对应的特征信息;根据各模态数据对应的特征信息确定第一视频和第二视频之间的综合相似度参数;若综合相似度参数大于预设相似度阈值,则将第一视频和第二视频识别为重复视频。通过考虑第一视频和第二视频的多模态数据,可准确得到综合相似度参数,基于综合相似度参数来准确科学的识别重复视频,避免基于单一模态特征相似度导致的不准确性。
技术领域
本公开实施例涉及计算机与网络通信技术领域,尤其涉及一种重复视频的识别方法、设备、储存介质及计算机程序产品。
背景技术
随着大数据时代的到来,视频作为一种新的交互形式,成为了整个人机交互中,甚至是人与人交流的重要组成部分。随着视频数据量的大幅度增长,在视频库中可能出现了许多相同视频,比如将某个视频的片段裁剪出来做成的短视频,或者通过不同渠道发布的相同视频等。为了实现对视频库中的相同视频进行去重处理,诞生了许多视频的去重技术。
现有技术中的去重技术在识别重复视频时,通常通过视频的关键帧检测,提取出一系列的视频关键帧,计算两个视频之间关键帧的图像相关性,然后通过多帧结果聚合得到两个视频之间相关程度,从而判断两个视频是否为重复视频。
但是现有技术中通过视频关键帧进行重复视频识别,其准确度并不高,容易产生错误的识别结果,将原本不一样的两个视频识别为重复视频。
发明内容
本公开实施例提供一种重复视频的识别方法、设备、储存介质及计算机程序产品,以提高重复视频识别的准确度。
第一方面,本公开实施例提供一种重复视频的识别方法,包括:
对待识别的第一视频提取第一多模态数据,其中,所述第一多模态数据包括至少两种模态数据;
对待识别的第二视频提取第二多模态数据,其中,所述第二多模态数据包括至少两种模态数据,且所述第一多模态数据的各模态数据种类与所述第二多模态数据的各模态数据种类相同;
针对所述第一多模态数据的各模态数据、以及所述第二多模态数据的各模态数据,分别提取各模态数据对应的特征信息;
根据所述各模态数据对应的特征信息,确定所述第一视频和所述第二视频之间的综合相似度参数的数值;
若所述第一视频和所述第二视频之间的综合相似度参数的数值大于预设相似度阈值,则将所述第一视频和所述第二视频识别为重复视频。
第二方面,本公开实施例提供一种重复视频的识别设备,包括:
提取单元,用于对待识别的第一视频提取第一多模态数据,其中,所述第一多模态数据包括至少两种模态数据;以及对待识别的第二视频提取第二多模态数据,其中,所述第二多模态数据包括至少两种模态数据,且所述第一多模态数据的各模态数据种类与所述第二多模态数据的各模态数据种类相同;
第一处理单元,用于针对所述第一多模态数据的各模态数据、以及所述第二多模态数据的各模态数据,分别提取各模态数据对应的特征信息;
第二处理单元,用于根据所述各模态数据对应的特征信息,确定所述第一视频和所述第二视频之间的综合相似度参数的数值;
识别单元,用于在所述第一视频和所述第二视频之间的综合相似度参数的数值大于预设相似度阈值时,将所述第一视频和所述第二视频识别为重复视频。
第三方面,本公开实施例提供一种电子设备,包括:至少一个处理器和存储器;
所述存储器存储计算机执行指令;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110521581.3/2.html,转载请声明来源钻瓜专利网。