[发明专利]音乐识别方法、音乐特征提取模型的训练方法及装置在审
申请号: | 202111322398.7 | 申请日: | 2021-11-09 |
公开(公告)号: | CN114023289A | 公开(公告)日: | 2022-02-08 |
发明(设计)人: | 刘云峰;王艺鹏 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G10H1/00 | 分类号: | G10H1/00;G06N3/04;G06N3/08;G10L25/18;G10L25/24;G10L25/30;G10L25/51 |
代理公司: | 北京市汉坤律师事务所 11602 | 代理人: | 姜浩然;吴丽丽 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音乐 识别 方法 特征 提取 模型 训练 装置 | ||
1.一种音乐识别方法,包括:
确定待识别音频中的音乐片段,其中所述音乐片段为包含音乐成分的音频片段;
提取所述音乐片段的第一特征向量;以及
基于所述第一特征向量,从音乐库中确定与所述待识别音频相匹配的至少一个目标音乐。
2.根据权利要求1所述方法,其中,所述待识别音频为音频数据流,并且其中,所述确定待识别音频中的音乐片段包括:
从所述音频数据流中依次截取预设时长的音频帧;
对于所截取出的每一个音频帧,检测所述音频帧是否包含音乐成分;
响应于包含音乐成分的连续的多个音频帧的数量达到第一阈值,将所述多个音频帧之后的音频数据确定为所述音乐片段。
3.根据权利要求1所述的方法,其中,所述待识别音频为音频文件,并且其中,所述确定待识别音频中的音乐片段包括:
将所述音频文件划分为多个音频帧;
对于所述多个音频帧中的每一个音频帧,检测所述音频帧是否包含音乐成分;
将包含音乐成分的一个或多个连续的音频帧确定为一个候选音乐片段,以得到所述音频文件对应的至少一个候选音乐片段;以及
将所述至少一个候选音乐片段中包括的音频帧数量最多的候选音乐片段确定为所述音乐片段。
4.根据权利要求2或3所述的方法,其中,所述检测所述音频帧是否包含音乐成分包括:
提取所述音频帧的频谱特征;以及
将所述频谱特征输入预设的音乐检测模型,以得到所述音乐检测模型输出的所述音频帧是否包含音乐成分的检测结果。
5.根据权利要求1-4中任一项所述的方法,其中,所述提取所述音乐片段的第一特征向量包括:
提取所述音乐片段的频谱特征;以及
将所述频谱特征输入预设的音乐特征提取模型,以得到所述音乐特征提取模型输出的所述音乐片段的第一特征向量。
6.根据权利要求1-5中任一项所述的方法,其中,所述音乐库包括多个候选音乐,并且其中,所述基于所述第一特征向量,从音乐库中确定与所述待识别音频相匹配的至少一个目标音乐包括:
对于所述多个候选音乐中的每一个候选音乐:
获取所述候选音乐对应的多个第二特征向量,其中所述候选音乐被划分为多个片段,所述多个片段与所述多个第二特征向量分别对应;
分别计算所述第一特征向量与所述多个第二特征向量中的每一个第二特征向量的距离;以及
基于所述距离,确定所述待识别音频与所述候选音乐的匹配度;以及
将匹配度最大或匹配度大于第二阈值的一个或多个候选音乐作为所述至少一个目标音乐。
7.根据权利要求6所述的方法,其中,基于所述距离,确定所述待识别音频与所述候选音乐的匹配度包括:
将与所述第一特征向量的距离小于第三阈值的第二特征向量对应的片段作为匹配片段;以及
将所述候选音乐中的匹配片段的数量与所述多个片段的总数量的比值确定为所述匹配度。
8.根据权利要求1-7中任一项所述的方法,还包括:
按照预设频率获取网络中的新增音乐;以及
将所述新增音乐添加至所述音乐库中。
9.一种音乐特征提取模型的训练方法,包括:
获取样本片段元组,其中,所述样本片段元组包括第一样本音乐片段和第二样本音乐片段,所述样本片段元组标注有匹配标签,所述匹配标签用于表示所述第一样本音乐片段和所述第二样本音乐片段是否属于相同的样本音乐;
提取所述第一样本音乐片段的第一频谱特征和所述第二样本音乐片段的第二频谱特征;
分别将所述第一频谱特征和所述第二频谱特征输入所述音乐特征提取模型,以得到所述第一样本音乐片段对应的第一样本特征向量和所述第二样本音乐片段对应的第二样本特征向量;
基于所述匹配标签和所述第一样本特征向量与所述第二样本特征向量的距离,计算所述音乐特征提取模型的损失值;以及
基于所述损失值,调整所述音乐特征提取模型的参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111322398.7/1.html,转载请声明来源钻瓜专利网。