[发明专利]一种查找相似视频片段的方法、系统、服务器及存储介质有效

专利信息
申请号: 202011157679.7 申请日: 2020-10-26
公开(公告)号: CN112434185B 公开(公告)日: 2023-07-14
发明(设计)人: 余英;常江;宫良;夏泳;党海飞;易鹏;刘骏;曹志;韦安明;李忠炤;韩凯;肖辉;刘文翰;丁正华;高杨;薛静宜 申请(专利权)人: 国家广播电视总局广播电视规划院;北京中广恒通科技有限公司
主分类号: G06F16/783 分类号: G06F16/783;G06F16/732;G06V10/74;G06V10/82;G06N3/0464;G06N3/08
代理公司: 北京博雅睿泉专利代理事务所(特殊普通合伙) 11442 代理人: 吴秀娥
地址: 100866 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 查找 相似 视频 片段 方法 系统 服务器 存储 介质
【权利要求书】:

1.一种查找相似视频片段的方法,用于对比视频中查找与待测视频中相似的连续视频片段,其特征在于,包括:

S1,通过预先建立的素材库中的图片及名称对卷积神经网络系统进行训练,通过识别图片中面积最大的物体来确定图片中的物体和名称,以识别图片中的物体;

S2,获取待测视频通过抽帧方式形成的第一图片序列;所述待测视频和对比视频的时间长度不同;

S3,通过训练后的卷积神经网络系统来识别所述第一图片序列中的物体,以得到用来标识物体的第一特征码;

S4,获取对比视频预先通过抽帧形成的第二图片序列并对其进行识别和标识的第二特征码;

S5,通过逐帧滑动的方式,对所述第一特征码与所述第二特征码进行对比,找出相似的连续视频片段;

当第一特征码中任意连续长度的特征码,与第二特征码中对应长度的特征码的相同比例超过预设的第二相似度阈值时,则该待测视频中的连续视频片段与对比视频中对应长度的连续视频片段相似;

S6,对所述待测视频中相似的连续视频片段中的每帧图片进行灰度缩略图计算,以得到多个灰度缩略图数据;从对比视频中获取预先计算出的相似的连续视频片段中任意一帧图片的第一灰度缩略图数据;

两张图片x和y的结构相似性SSIM(x,y)计算按照如下公式求出:

其中,μx是x的平均值,μy是y的平均值,是x的方差,是y的方差,σxy是x和y的协方差;c1=(k1L)2,c2=(k2L)2是用来维持稳定的常数;L是像素值的动态范围;k1=0.01,k2=0.03;

S7,将所述第一灰度缩略图数据分别与多个灰度缩略图数据进行结构相似性计算,以得到多个关于两张图片的结构相似度值;当任意一个相似度值超过预设的第一相似度阈值时,则认为该相似的连续视频片段属于重复片段。

2.一种查找相似视频片段的系统,用于在对比视频中查找与待测视频中相似的视频片段,其特征在于,包括:

构建单元,通过预先建立的素材库中的图片及名称对卷积神经网络系统进行训练,通过识别图片中面积最大的物体来确定图片中的物体和名称,以识别图片中的物体;

抽取单元,用于获取待测视频通过抽帧方式形成的第一图片序列;所述待测视频和对比视频的时间长度不同;

识别单元,用于通过训练后的卷积神经网络系统来识别所述第一图片序列中的物体,以得到用来标识物体的第一特征码;

以及,获取对比视频预先通过抽帧形成的第二图片序列并对其进行识别和标识的第二特征码;

第一对比单元,用于通过逐帧滑动的方式,对所述第一特征码与所述第二特征码进行对比,找出相似的连续视频片段;

当第一特征码中任意连续长度的特征码,与第二特征码中对应长度的特征码的相同比例超过预设的第二相似度阈值时,则该待测视频中的连续视频片段与对比视频中对应长度的连续视频片段相似;

以及,用于对所述待测视频中相似的连续视频片段中的每帧图片进行灰度缩略图计算,以得到多个灰度缩略图数据;从对比视频中获取预先计算出的相似的连续视频片段中任意一帧图片的第一灰度缩略图数据;

两张图片x和y的结构相似性SSIM(x,y)计算按照如下公式求出:

其中,μx是x的平均值,μy是y的平均值,是x的方差,是y的方差,σxy是x和y的协方差;c1=(k1L)2,c2=(k2L)2是用来维持稳定的常数;L是像素值的动态范围;k1=0.01,k2=0.03;

以及,用于将所述第一灰度缩略图数据分别与多个灰度缩略图数据进行结构相似性计算,以得到多个关于两张图片的结构相似度值;当任意一个相似度值超过预设的第一相似度阈值时,则认为该相似的连续视频片段属于重复片段。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家广播电视总局广播电视规划院;北京中广恒通科技有限公司,未经国家广播电视总局广播电视规划院;北京中广恒通科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011157679.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top