[发明专利]模型匹配方法、装置、电子设备及可读存储介质在审
| 申请号: | 202210642792.7 | 申请日: | 2022-06-08 | 
| 公开(公告)号: | CN115064149A | 公开(公告)日: | 2022-09-16 | 
| 发明(设计)人: | 吕翔;印晶晶;卢恒 | 申请(专利权)人: | 上海喜马拉雅科技有限公司 | 
| 主分类号: | G10L13/02 | 分类号: | G10L13/02;G10L13/08 | 
| 代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 戴尧罡 | 
| 地址: | 201100 上海市*** | 国省代码: | 上海;31 | 
| 权利要求书: | 查看更多 | 说明书: | 查看更多 | 
| 摘要: | |||
| 搜索关键词: | 模型 匹配 方法 装置 电子设备 可读 存储 介质 | ||
1.一种模型匹配方法,其特征在于,包括:
获取目标用户的目标音频对应的目标声纹特征;所述目标音频对应一个固定文本;
获取所述目标声纹特征与锚点声纹库对应的第一匹配信息;
获取所述固定文本对应的多个场景声纹特征;其中,模型库中包含多个语音合成模型,每个场景声纹特征对应一个所述语音合成模型;
分别获取每个所述场景声纹特征对应的第二匹配信息;
分别获取目标声纹特征与每个所述场景声纹特征的匹配度评分;
利用所述第一匹配信息与所述第二匹配信息,分别对每个所述匹配度评分进行归一化处理,得到每个所述场景声纹特征对应的归一化分值;
根据全部所述归一化分值,从所述模型库中确定与所述目标声纹特征匹配的目标语音合成模型。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
获取模板音频集合对应的模板音频文本集合;所述模板音频集合中包含多个模板音频,所述模板音频文本集合包含多个模板音频文本;任意一个所述模板音频存在一个对应的模板音频文本;
将所述模板音频文本集合分别输入每个所述语音合成模型,获得每个所述模板音频文本集合对应的语音合成音频集合;所述语音合成音频集合中包含多个语音合成音频;每个训练音频文本对应的一个语音合成音频与一个所述语音合成模型对应;
利用声纹模型,对所述语音合成音频集合和所述模板音频集合进行特征提取,得到声纹特征集合以构成所述锚点声纹库;其中,所述锚点声纹库中包含每个所述语音合成音频的声纹特征和每个所述模板音频的声纹特征。
3.如权利要求1所述的方法,其特征在于,所述锚点声纹库中包含多个声纹特征,所述第一匹配信息包括第一均值和第一标准差,所述获取所述目标声纹特征与锚点声纹库对应的第一匹配信息的步骤,包括:
将所述目标声纹特征分别与锚点声纹库中的每个声纹特征进行匹配,得到所述目标声纹特征对应的多个第一匹配分值;每个所述第一匹配分值对应所述锚点声纹库中的一个所述声纹特征;
从多个所述第一匹配分值中选取K个第一匹配分值,并基于所述K个第一匹配分值计算所述第一均值和所述第一标准差。
4.如权利要求1所述的方法,其特征在于,所述获取所述固定文本对应的多个场景声纹特征的步骤,包括:
将所述固定文本分别输入每个所述语音合成模型,得到多个目标语音合成音频;
利用声纹模型,分别对每个所述目标语音合成音频进行特征提取,得到多个所述场景声纹特征。
5.如权利要求1所述的方法,其特征在于,所述锚点声纹库中包含多个声纹特征,所述第二匹配信息包括每个所述场景声纹特征的第二均值和第二标准差,所述分别获取每个所述场景声纹特征对应的第二匹配信息的步骤,包括:
逐个将每个所述场景声纹特征分别与锚点声纹库中的每个声纹特征进行匹配,得到每个所述场景声纹特征对应的多个第二匹配分值;
针对每个所述场景声纹特征,从每个所述场景声纹特征对应的多个第二匹配分值选取K个第二匹配分值,并基于所述K个第二匹配分值计算该场景声纹特征的第二均值和第二标准差。
6.一种模型匹配装置,其特征在于,包括第一获取模块、第二获取模块和处理模块;
所述第一获取模块,用于:
获取目标用户的目标音频对应的目标声纹特征;所述目标音频对应一个固定文本;
获取所述目标声纹特征与锚点声纹库对应的第一匹配信息;
所述第二获取模块,用于:
获取所述固定文本对应的多个场景声纹特征;其中,模型库中包含多个语音合成模型,每个场景声纹特征对应一个所述语音合成模型;
分别获取每个所述场景声纹特征对应的第二匹配信息;
分别获取目标声纹特征与每个所述场景声纹特征的匹配度评分;
所述处理模块,用于:
利用所述第一匹配信息与所述第二匹配信息,分别对每个所述匹配度评分进行归一化处理,得到每个所述场景声纹特征对应的归一化分值;
根据全部所述归一化分值,从所述模型库中确定与所述目标声纹特征匹配的目标语音合成模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海喜马拉雅科技有限公司,未经上海喜马拉雅科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210642792.7/1.html,转载请声明来源钻瓜专利网。





