[发明专利]视频图像处理方法、计算机可读存储介质及终端在审
申请号: | 201711481177.8 | 申请日: | 2017-12-29 |
公开(公告)号: | CN108259984A | 公开(公告)日: | 2018-07-06 |
发明(设计)人: | 危文;袁少龙;周宇涛;丘智鉴;颜乐驹;魏启征;李敬 | 申请(专利权)人: | 广州市百果园信息技术有限公司 |
主分类号: | H04N21/439 | 分类号: | H04N21/439;H04N21/84;H04N21/431;H04N21/485;H04N21/81 |
代理公司: | 北京市立方律师事务所 11330 | 代理人: | 刘延喜 |
地址: | 511442 广东省广州市番禺区南村*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 节拍 描述文件 播放 视频 视频图像处理 音乐播放位置 播放音乐 视频图像 音乐信号 音乐 计算机可读存储介质 播放位置 关系生成 视频应用 音乐节拍 用户体验 检测 听觉 关联 视觉 图像 终端 保存 | ||
1.一种视频图像处理方法,其特征在于,包括如下步骤:
获取欲在播放视频中播放的音乐的音乐信号;
判断是否预存有用于保存所述音乐的节拍点与音乐播放位置的对应关系的节拍点描述文件;若是,获取所述节拍点描述文件;若否,根据所述音乐信号检测出所述音乐的节拍点,根据所检测出的节拍点与音乐播放位置的对应关系生成节拍点描述文件;
根据所述节拍点描述文件,确定在播放视频中播放音乐时,在当前播放位置出现节拍点;
获取所述节拍点对应的特效;根据所述特效对播放视频中的图像进行处理,获得包含所述特效的视频图像。
2.根据权利要求1所述的视频图像处理方法,其特征在于,所述判断是否预存有用于保存所述音乐的节拍点与音乐播放位置的对应关系的节拍点描述文件;若是,获取所述节拍点描述文件;包括:
判断本地文件中是否预存有节拍点描述文件,若是,从本地文件中获取所述节拍点描述文件;或
判断服务器是否预存有节拍点描述文件,若是,从服务器中下载所述节拍点描述文件;或
判断本地文件中是否预存有节拍点描述文件,若是,从本地文件中获取所述节拍点描述文件;若否,判断服务器是否预存有节拍点描述文件,若是,从服务器中下载所述节拍点描述文件。
3.根据权利要求1所述的视频图像处理方法,其特征在于,所述获取所述节拍点描述文件之后,还包括:
若所述节拍点描述文件为从服务器下载的节拍点描述文件,根据所述音乐信号检测出所述音乐的节拍点,根据检测出的节拍点对所述节拍点描述文件进行校对,在本地文件中保存所述校对后的节拍点描述文件。
4.根据权利要求1所述的视频图像处理方法,其特征在于,所述根据所述音乐信号检测出所述音乐的节拍点,根据所检测出的节拍点与音乐播放位置的对应关系生成节拍点描述文件之后,还包括:
将所述节拍点描述文件上传到服务器。
5.根据权利要求1所述的视频图像处理方法,其特征在于,所述视频为直播视频;
所述获取所述节拍点对应的特效之前,还包括:
获取直播端的主播设置的所述音乐的节拍点对应的特效信息,将节拍点与音乐播放位置与特效信息的对应关系保存到所述节拍点描述文件中;生成包含特效信息的节拍点描述文件;
所述获取所述节拍点对应的特效,包括:
根据所述包含特效信息的节拍点描述文件,获取所述节拍点对应的特效。
6.根据权利要求5所述的视频图像处理方法,其特征在于,所述生成包含特效信息的节拍点描述文件之后,还包括:
向连麦的另一直播端发送所述音乐、所述包含特效信息的节拍点描述文件、所述节拍点对应的特效,以使另一直播端在播放所述音乐时显示与本直播端相同特效。
7.根据权利要求1所述的视频图像处理方法,其特征在于,所述节拍点包括强节拍点和弱节拍点;
所述根据所述音乐信号检测出所述音乐的节拍点,包括:
对所述音乐信号进行滤波,滤波后进行短时傅立叶变换,获得频谱;
根据所述频谱,确定检测点的能量变化值;
根据能量变化值,检测出检测点出现强节拍点或弱节拍点。
8.根据权利要求1所述的视频图像处理方法,其特征在于,所述节拍点包括强节拍点和弱节拍点;
所述根据所述音乐信号检测出所述音乐的节拍点,包括:
对所述音乐信号进行加权处理,获得加权后的音乐信号;
根据所述加权后的音乐信号的能量强度值,检测出检测点出现强节拍点或弱节拍点。
9.根据权利要求1所述的视频图像处理方法,其特征在于,所述节拍点包括强节拍点;
所述根据所述音乐信号检测出所述音乐的节拍点,包括:
根据所述音乐信号的能量强度值获得候选节拍点;
根据各候选节拍点,统计各相邻两个候选节拍点所在帧之间的时间间隔;
根据所述时间间隔,检测出候选节拍点对应检测点出现强节拍点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州市百果园信息技术有限公司,未经广州市百果园信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711481177.8/1.html,转载请声明来源钻瓜专利网。