[发明专利]视频检索方法及系统在审
申请号: | 201610084093.X | 申请日: | 2016-02-06 |
公开(公告)号: | CN105760472A | 公开(公告)日: | 2016-07-13 |
发明(设计)人: | 杨颖;李丹阳;贾静丽 | 申请(专利权)人: | 中国农业大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06K9/00;G06K9/62 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王文君 |
地址: | 100193 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 检索 方法 系统 | ||
技术领域
本发明涉及多媒体技术领域,尤其涉及一种视频检索方法及系统。
背景技术
2010年,Google公司的智能电视计划,正式开启了电视的智能化时代,人们对视频的需求也正朝着个性化、人性化的方面发展。
在日常视频搜索中,用户可能只对某个人或某几个人的视频片段感兴趣,而大多数视频资源即使包含感兴趣的视频片段,但视频资源本身通常具有较长时间,因而为查看感兴趣的视频片段不得不查看整个视频资源,或者由于定位不精确错过一些感兴趣的视频片段。由此,造成用户对感兴趣部分的视频查找困难,从而使得用户在对视频进行检索的时间也相对较长,大大降低了用户的观赏体验。
发明内容
针对现有技术中的缺陷,本发明提供一种视频检索方法及系统,以解决现有技术中对感兴趣部分查找困难的问题。
第一方面,本发明提供一种视频检索方法,包括:
在接收到检索关键词时,将待检索视频分割为多个镜头;
提取所述镜头的前N帧图像,并在提取的图像中检测是否存在人脸图像,N为大于等于1的整数;
在前N帧图像存在人脸图像的镜头中检测出所有人脸图像;
根据所述检索关键词,将所述检索关键词对应的样本集与所述人脸图像进行对比,计算各人脸图像与所述样本集的相似度;
将所述相似度大于第一预设值的人脸图像在所属镜头内进行整合,并将整合后的各镜头连接,以得到目标视频。
优选地,所述将待检索视频分割为多个镜头,包括:
提取待检索视频的视觉特征;
根据所述视觉特征度量相邻图像之间的相似度;
在所述相似度小于第二预设值时,将所述相邻图像分割为两个镜头。
优选地,所述在前N帧图像存在人脸图像的镜头中检测出所有人脸图像,包括:
采用级联分类器在所述前N帧图像存在人脸图像的镜头中检测出所有人脸图像。
优选地,所述根据所述检索关键词,将所述检索关键词对应的样本集与所述人脸图像进行对比,计算各人脸图像与所述样本集的相似度,包括:
根据所述检索关键词,在人脸样本数据库中提取与所述检索关键词相关的样本集,所述样本集为同一人物的多个人脸样本图像;
将所述图像表示为将所述人脸样本图像的线性组合;
根据所述线性组合的系数计算该图像与所述样本集的相似度。
优选地,所述将所述相似度大于第一预设值的人脸图像在所属镜头内进行整合,包括:
将所述相似度大于第一预设值的人脸图像在该人脸图像所属的镜头内进行聚类;
将聚类的人脸图像与该人脸图像对应的时间信息和声音信息关联,以生成包括该人脸图像的镜头。
第二方面,本发明提供一种视频检索系统,包括:
视频镜头分割模块,用于在接收到检索关键词时,将待检索视频分割为多个镜头;
镜头检测模块,用于提取所述镜头的前N帧图像,并在提取的图像中检测是否存在人脸图像,N为大于等于1的整数;
人脸图像检测模块,用于在前N帧图像存在人脸图像的镜头中检测出所有人脸图像;
人脸图像检索模块,用于根据所述检索关键词,将所述检索关键词对应的样本集与所述人脸图像进行对比,计算各人脸图像与所述样本集的相似度;
目标视频生成模块,用于将所述相似度大于第一预设值的人脸图像在所属镜头内进行整合,并将整合后的各镜头连接,以得到目标视频。
优选地,所述视频镜头分割模块,具体用于
提取待检索视频的视觉特征;
根据所述视觉特征度量相邻图像之间的相似度;
在所述相似度小于第二预设值时,将所述相邻图像分割为两个镜头。
优选地,所述人脸图像检测模块,具体用于
采用级联分类器在所述前N帧图像存在人脸图像的镜头中检测出所有人脸图像。
优选地,所述人脸图像检索模块,具体用于
根据所述检索关键词,在人脸样本数据库中提取与所述检索关键词相关的样本集,所述样本集为同一人物的多个人脸样本图像;
将所述图像表示为将所述人脸样本图像的线性组合;
根据所述线性组合的系数计算该图像与所述样本集的相似度。
优选地,所述目标视频生成模块,具体用于
将所述相似度大于第一预设值的人脸图像在该人脸图像所属的镜头内进行聚类;
将聚类的人脸图像与该人脸图像对应的时间信息和声音信息关联,以生成包括该人脸图像的镜头。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国农业大学,未经中国农业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610084093.X/2.html,转载请声明来源钻瓜专利网。