[发明专利]音频匹配方法、装置、设备及存储介质在审
| 申请号: | 202211477045.9 | 申请日: | 2022-11-23 |
| 公开(公告)号: | CN116186323A | 公开(公告)日: | 2023-05-30 |
| 发明(设计)人: | 冯鑫 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
| 主分类号: | G06F16/683 | 分类号: | G06F16/683;G06F16/65;G10L25/51;G10L25/30 |
| 代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 徐耿铭 |
| 地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 音频 匹配 方法 装置 设备 存储 介质 | ||
1.一种音频匹配方法,其特征在于,所述方法包括:
获取待匹配音频的特征信息,所述待匹配音频的特征信息用于表征所述待匹配音频的语义特征;
根据所述待匹配音频的特征信息,确定所述待匹配音频的标签信息,所述待匹配音频的标签信息包括所述待匹配音频在多个类别下分别对应的置信度,所述置信度用于表征所述待匹配音频与所述类别的相关程度;
根据所述待匹配音频的标签信息,以及音频库中包含的各个音频的标签信息,从所述音频库中选择至少一个候选音频;
从所述至少一个候选音频中,确定与所述待匹配音频相匹配的目标候选音频。
2.根据权利要求1所述的方法,其特征在于,所述根据所述待匹配音频的特征信息,确定所述待匹配音频的标签信息,包括:
通过多个不同的分类网络,分别根据所述待匹配音频的特征信息,确定所述待匹配音频的分类结果;其中,不同的分类网络对应于不同的分类方式,每一个分类网络确定的分类结果包括:所述待匹配音频在所述分类网络对应的分类方式的多个类别下分别对应的置信度;
根据所述多个不同的分类网络分别确定的分类结果,确定所述待匹配音频的标签信息。
3.根据权利要求2所述的方法,其特征在于,所述多个不同的分类网络包括第一分类网络和第二分类网络,所述第一分类网络对应的分类方式为基于音频风格分类,所述第二分类网络对应的分类方式为基于音频情绪分类;
所述通过多个不同的分类网络,分别根据所述待匹配音频的特征信息,确定所述待匹配音频的分类结果,包括:
通过所述第一分类网络根据所述待匹配音频的特征信息,确定所述待匹配音频的第一分类结果,所述第一分类结果包括:所述待匹配音频在基于音频风格分类得到的多个类别下分别对应的置信度;
通过所述第二分类网络根据所述待匹配音频的特征信息,确定所述待匹配音频的第二分类结果,所述第二分类结果包括:所述待匹配音频在基于音频情绪分类得到的多个类别下分别对应的置信度。
4.根据权利要求2所述的方法,其特征在于,所述根据所述多个不同的分类网络分别确定的分类结果,确定所述待匹配音频的标签信息,包括:
对于每一个分类网络,根据所述分类网络对应的结果筛选条件,从所述分类网络确定的分类结果中,选择满足所述结果筛选条件的至少一个置信度,得到所述分类网络对应的筛选后分类结果;
整合各个所述分类网络分别对应的筛选后分类结果,得到所述待匹配音频的标签信息。
5.根据权利要求1所述方法,其特征在于,所述获取待匹配音频的特征信息,包括:
获取所述待匹配音频的多频带语义特征序列,所述多频带语义特征序列包括:对所述待匹配音频进行分帧处理,得到的多个音频帧分别对应的语义特征;
根据所述多频带语义特征序列,生成所述待匹配音频的特征信息。
6.根据权利要求5所述的方法,其特征在于,所述获取所述待匹配音频的多频带语义特征序列,包括:
提取所述待匹配音频的时域特征信息和频域特征信息,所述时域特征信息用于表征所述待匹配音频在时域维度的特征,所述频域特征信息用于表征所述待匹配音频在频域维度的特征;
对所述时域特征信息提取过程中的至少一个中间时域特征,以及所述频域特征信息提取过程中的至少一个中间频域特征进行融合处理,得到所述待匹配音频的交互特征信息,所述交互特征信息用于表征所述待匹配音频在所述时域维度和所述频域维度之间的交互特征;
根据所述时域特征信息、所述频域特征信息和所述交互特征信息,得到所述待匹配音频的多频带语义特征序列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211477045.9/1.html,转载请声明来源钻瓜专利网。





