[发明专利]模型训练、音频处理方法、装置、设备、存储介质及程序有效
申请号: | 202210269922.7 | 申请日: | 2022-03-18 |
公开(公告)号: | CN114512136B | 公开(公告)日: | 2023-09-26 |
发明(设计)人: | 陈立;邹赛赛;许楠 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G10L17/22 | 分类号: | G10L17/22;G10L17/04;G10L17/18;G10L17/20;G10L17/24 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 李哲;刘芳 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型 训练 音频 处理 方法 装置 设备 存储 介质 程序 | ||
1.一种模型训练方法,包括:
获取第一训练样本,所述第一训练样本包括:第一纯净唤醒音频和第一回声唤醒音频,所述第一回声唤醒音频是通过对所述第一纯净唤醒音频添加回声得到的;
通过待训练的回声消除模型对所述第一回声唤醒音频进行回声消除处理,得到第一预测唤醒音频;
通过训练好的唤醒识别模型对所述第一预测唤醒音频进行特征提取处理,得到第一音频特征,并对所述第一音频特征进行唤醒识别处理,得到第一唤醒识别结果;
通过训练好的唤醒识别模型对所述第一纯净唤醒音频进行特征提取处理,得到第二音频特征,并对所述第二音频特征进行唤醒识别处理,得到第二唤醒识别结果;
根据所述第一唤醒识别结果和所述第二唤醒识别结果,确定识别结果损失函数;所述识别结果损失函数用于指示所述第一唤醒识别结果和所述第二唤醒识别结果之间的差异;
根据所述第一音频特征和所述第二音频特征,确定特征损失函数;所述特征损失函数用于指示所述第一音频特征和所述第二音频特征之间的差异;
根据所述识别结果损失函数和所述特征损失函数,确定第一损失函数;
根据所述第一损失函数,对所述回声消除模型的模型参数进行更新,所述更新的目标为:所述唤醒识别模型对所述第一预测唤醒音频的唤醒识别结果趋近于对所述第一纯净唤醒音频的唤醒识别结果。
2.根据权利要求1所述的方法,其中,所述唤醒识别模型包括N个特征提取单元,所述N为大于1的整数;所述第一音频特征包括:各特征提取单元输出的第一中间音频特征;所述第二音频特征包括:各特征提取单元输出的第二中间音频特征;
根据所述第一音频特征和所述第二音频特征,确定特征损失函数,包括:
根据同一特征提取单元输出的所述第一中间音频特征和所述第二中间音频特征,确定所述特征提取单元对应的中间特征损失函数;
根据所述N个特征提取单元对应的中间特征损失函数,确定所述特征损失函数。
3.根据权利要求1或2所述的方法,根据所述第一预测唤醒音频和所述第一纯净唤醒音频,对所述回声消除模型的模型参数进行更新之后,还包括:
判断更新后的回声消除模型是否收敛;
若是,则将更新后的回声消除模型作为训练完成的回声消除模型;
若否,则重复对所述回声消除模型进行训练,直至更新后的回声消除模型收敛。
4.根据权利要求1至3任一项所述的方法,还包括:
获取第二训练样本,所述第二训练样本包括:第二纯净唤醒音频和第二回声唤醒音频,所述第二回声唤醒音频是通过对所述第二纯净唤醒音频添加回声得到的;
通过预设基础模型对所述第二回声唤醒音频进行回声消除处理,得到第二预测唤醒音频;
根据所述第二预测唤醒音频和所述第二纯净唤醒音频,对所述预设基础模型的模型参数进行更新,以得到所述待训练的回声消除模型。
5.根据权利要求4所述的方法,根据所述第二预测唤醒音频和所述第二纯净唤醒音频,对所述预设基础模型的模型参数进行更新,以得到所述待训练的回声消除模型,包括:
根据所述第二预测唤醒音频和所述第二纯净唤醒音频,确定第二损失函数;
根据所述第二损失函数,对所述预设基础模型的模型参数进行更新;
判断更新后的预设基础模型是否收敛;
若是,则将所述更新后的预设基础模型作为所述待训练的回声消除模型;
若否,则重复对所述预设基础模型进行训练,直至更新后的预设基础模型收敛。
6.一种音频处理方法,包括:
获取电子设备采集到的第一音频;
通过回声消除模型对所述第一音频进行回声消除处理,得到第二音频;
通过唤醒识别模型对所述第二音频进行唤醒识别处理,以确定是否唤醒所述电子设备;
其中,所述回声消除模型是采用如权利要求1至5任一项所述的模型训练方法得到的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210269922.7/1.html,转载请声明来源钻瓜专利网。