[发明专利]神经网络的训练和语音端点检测方法及装置有效
| 申请号: | 201911391398.5 | 申请日: | 2019-12-30 |
| 公开(公告)号: | CN111312218B | 公开(公告)日: | 2022-07-05 |
| 发明(设计)人: | 胡雪成 | 申请(专利权)人: | 思必驰科技股份有限公司 |
| 主分类号: | G10L15/04 | 分类号: | G10L15/04;G10L15/06;G10L15/08;G10L25/30 |
| 代理公司: | 北京商专永信知识产权代理事务所(普通合伙) 11400 | 代理人: | 黄谦;邓婷婷 |
| 地址: | 215123 江苏省苏州市苏*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 神经网络 训练 语音 端点 检测 方法 装置 | ||
1.一种语音端点检测方法,包括:
提取待测音频的声学特征,将所述音频特征输入至训练后的FSMN模型中;
获取训练后的所述FSMN模型输出的对所述待测音频中各帧音频的分类结果,其中,所述分类结果包括语音音频数据和非语音音频数据;
对所述分类结果进行平滑处理,输出平滑后的各段语音音频数据的端点。
2.根据权利要求1所述的方法,其中,所述FSMN模型的训练方法包括:
将语音音频数据和非语音音频数据随机混合形成混合音频数据;
提取所述混合音频数据的声学特征;
将所述声学特征输入所述FSMN模型中,训练所述FSMN模型使得所述FSMN模型的输出的对于语音音频数据和非语音音频数据的分类基本等于所述混合音频数据中语音音频数据和非语音音频数据的分类。
3.根据权利要求2所述的方法,其中,所述训练所述FSMN模型使得所述FSMN模型的输出的对于语音音频数据和非语音音频数据的分类基本等于所述混合音频数据中语音音频数据和非语音音频数据的分类包括:
基于所述混合音频数据形成训练集和验证集;
基于所述训练集和所述验证集的交叉熵来训练所述FSMN模型,判断训练后的FSMN模型的性能是否满足预设要求;
若性能不满足预设要求,则对所述FSMN模型进行超参数调节,并重新训练所述FSMN模型直至所述FSMN模型的性能满足预设要求。
4.根据权利要求2或3所述的方法,其中,所述语音音频数据和所述非语音音频数据均为多场景类型的音频数据。
5.根据权利要求4所述的方法,其中,所述声学特征包括Fbank特征。
6.一种语音端点检测装置,包括:
输入模块,配置为提取待测音频的声学特征,将所述音频特征输入至训练后的FSMN模型中;
结果获取模块,配置为获取所述训练后的FSMN模型输出的对所述待测音频中各帧音频的分类结果,其中,所述分类结果包括语音音频数据和非语音音频数据;
端点输出模块,配置为对所述分类结果进行平滑处理,输出平滑后的各段语音音频数据的端点。
7.一种电子设备,其包括:至少一个处理器,以及与所述至少一个处理器通信连接的存储器,其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至5任一项所述方法的步骤。
8.一种存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5任一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于思必驰科技股份有限公司,未经思必驰科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911391398.5/1.html,转载请声明来源钻瓜专利网。





