[发明专利]一种视频精彩片段识别方法及装置在审
| 申请号: | 201910579845.3 | 申请日: | 2019-06-28 |
| 公开(公告)号: | CN110263220A | 公开(公告)日: | 2019-09-20 |
| 发明(设计)人: | 张云桃;晋瑞锦 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
| 主分类号: | G06F16/783 | 分类号: | G06F16/783;G06F16/75;G06K9/00;G06K9/62 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王娇娇 |
| 地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 精彩片段 视频片段 维度 视频精彩片段 准确度 视频 视觉 图像特征向量 音频特征向量 方法提取 节奏变化 空间维度 时间维度 视频特征 音频特征 音频信息 综合考虑 听觉 捕捉 | ||
本发明提供了一种视频精彩片段识别方法及装置,从视频片段中提取了视觉维度的特征,即图像特征向量,同时,还提取了听觉维度的特征,即音频特征向量。音频信息也是视频的一个重要构成,音频的节奏变化在一定程度上能够反映视频片段的精彩程度。因此,综合考虑视频特征和音频特征来判断该视频片段是否是精彩片段,能够提高精彩片段识别的准确度。而且,该方法提取视觉维度的特征,同时还捕捉了视频中时间维度和空间维度的特征,因此,在一定程度上也能够提高识别精彩片段的准确度。
技术领域
本发明属于计算机技术领域,尤其涉及一种视频精彩片段识别方法及装置。
背景技术
随着网络技术和智能移动设备迅速发展,大量的视频信息涌现在用户面前。这些视频信息丰富了我们的生活,但是,视频信息的丰富性是以无结构性为代价。当需要从大量视频中找到精彩的视频片段时,精彩视频片段识别技术凸显出重要性。
精彩片段识别技术能够自动识别出视频中的精彩片段,并提取出来。但目前的精彩片段识别技术基于图片特征来识别视频片段是否是精彩片段,识别结果精度低。
发明内容
有鉴于此,本发明的目的在于提供一种视频精彩片段识别方法及装置,以解决传统的精彩片段识别方法的识别结果精度低的技术问题。其具体的技术方案如下:
第一方面,本发明提供了一种视频精彩片段识别方法,包括:
提取待识别视频片段中同一时间片段对应的音频特征向量及图像特征向量,所述音频特征向量表征所述待识别视频片段在时间维度上的音频信息,所述图像特征向量表征所述待识别视频片段在时间维度及空间维度包含的信息;
根据所述视频特征向量和音频特征向量生成音视频特征向量;
利用预先训练得到的分类器分析所述音视频特征向量,得到所述待识别视频片段的精彩度分类结果。
在第一方面的一种可能的实现方式中,所述分类器的训练过程,包括:
获取多个视频片段样本数据,每个所述视频片段样本数据包含表征所述视频片段样本数据的精彩度标注信息;
针对每一视频片段样本数据,提取所述视频片段样本数据中同一时间片段对应的图像特征向量和音频特征向量;
根据同一视频片段样本数据对应的图像特征向量和音频特征向量生成音视频特征向量;
利用预设分类器模型分析各个视频片段样本数据对应的音视频特征向量,得到每个视频片段样本数据的精彩度分类结果;
依据所述各个视频片段样本数据对应的精彩度分类结果及精彩度标注信息,调整所述预设分类器模型中的模型参数,直到利用调整后的分类器模型对所述各个视频片段样本数据进行分类得到的分类结果满足预设收敛条件。
在第一方面的另一种可能的实现方式中,所述利用预先训练得到的分类器分析所述音视频特征向量,得到所述待识别视频片段的精彩度分类结果,包括:
利用预先训练得到的分类器分析所述待识别视频片段的音视频特征向量,得到所述待识别视频片段属于两个类别中每个类别的置信度;
选取置信度最大的分类结果,确定为所述待识别视频片段目标分类结果。
在第一方面的又一种可能的实现方式中,所述利用预先训练得到的分类器分析所述音视频特征向量,得到所述待识别视频片段的精彩度分类结果,包括:
利用预先训练得到的分类器分析所述待识别视频片段的音视频特征向量,得到所述待识别视频片段的精彩度分数;
当所述精彩度分数大于或等于预设分数值时,确定所述待识别视频片段是精彩片段;
当所述精彩度分数小于所述预设分数值时,确定所述待识别视频片段不是精彩片段。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910579845.3/2.html,转载请声明来源钻瓜专利网。





