[发明专利]语音性别联合识别方法、装置、电子设备及存储介质有效
申请号: | 202210308617.4 | 申请日: | 2022-03-28 |
公开(公告)号: | CN114420109B | 公开(公告)日: | 2022-06-21 |
发明(设计)人: | 代勤;赵超 | 申请(专利权)人: | 北京沃丰时代数据科技有限公司 |
主分类号: | G10L15/06 | 分类号: | G10L15/06;G10L15/02 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 吴勇涛 |
地址: | 100160 北京市丰台区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 性别 联合 识别 方法 装置 电子设备 存储 介质 | ||
1.一种语音性别联合识别方法,其特征在于,包括:
获取待识别的语音数据;
基于所述待识别的语音数据和语音性别联合识别模型,获得语音性别联合识别结果;
所述语音性别联合识别模型的训练过程包括:
获取语音性别联合训练数据样本,以作为联合训练集;
基于联合网络算法中的语音识别网络对所述联合训练集进行学习训练,以获得注重内容式识别结果;
基于所述联合网络算法中的性别识别网络对所述联合训练集与所述注重内容式识别结果进行学习训练,以获得注重性别式识别结果;
基于所述注重内容式识别结果和所述注重性别式识别结果,获得语音性别联合识别结果;
基于语音性别联合识别结果获得所述语音性别联合识别模型;
所述基于所述联合网络算法中的性别识别网络对所述联合训练集与所述注重内容式识别结果进行学习训练,以获得注重性别式识别结果,包括:
将所述注重内容式识别结果与所述联合训练集进行匹配,获得内容匹配数据;
选取所述联合训练集中除所述内容匹配数据以外的数据,以作为联合训练子集;
基于所述性别识别网络对所述联合训练子集进行学习训练,以获得注重性别式识别结果;
其中,所述语音性别联合识别模型为预先基于联合训练集和联合网络算法训练得到的。
2.根据权利要求1所述的语音性别联合识别方法,其特征在于,所述联合训练集的获取过程包括:
获取若干语音识别数据样本,以作为第一训练集;
获取若干性别识别数据样本,以作为第二训练集;
基于所述第二训练集和整句分类法,获得所述性别识别网络;
基于所述第一训练集和所述性别识别网络,获得第三训练集;
将所述第二训练集和所述第三训练集进行融合,以获得所述联合训练集。
3.根据权利要求2所述的语音性别联合识别方法,其特征在于,所述基于所述第一训练集和所述性别识别网络,获得第三训练集,包括:
从所述第一训练集中随机选取若干语音识别数据样本;
基于所述性别识别网络对所选取的语音识别数据样本进行性别识别及分类处理,以获得分类数据样本;
从所述分类数据样本中筛选分类置信度大于等于预设置信度值的分类数据样本,以作为第三训练集。
4.根据权利要求1所述的语音性别联合识别方法,其特征在于,还包括:
基于所述语音性别联合识别结果对所述语音性别联合识别模型进行动态更新。
5.根据权利要求1所述的语音性别联合识别方法,其特征在于,所述待识别的语音数据为数据流形式,以使所述语音性别联合识别模型对所述待识别的语音数据进行流式计算。
6.一种语音性别联合识别装置,其特征在于,包括:
获取模块,用于获取待识别的语音数据;
识别模块,用于基于所述待识别的语音数据和语音性别联合识别模型,获得语音性别联合识别结果;
所述语音性别联合识别模型的训练过程包括:
获取语音性别联合训练数据样本,以作为联合训练集;
基于联合网络算法中的语音识别网络对所述联合训练集进行学习训练,以获得注重内容式识别结果;
基于所述联合网络算法中的性别识别网络对所述联合训练集与所述注重内容式识别结果进行学习训练,以获得注重性别式识别结果;
基于所述注重内容式识别结果和所述注重性别式识别结果,获得语音性别联合识别结果;
基于语音性别联合识别结果获得所述语音性别联合识别模型;
所述基于所述联合网络算法中的性别识别网络对所述联合训练集与所述注重内容式识别结果进行学习训练,以获得注重性别式识别结果,包括:
将所述注重内容式识别结果与所述联合训练集进行匹配,获得内容匹配数据;
选取所述联合训练集中除所述内容匹配数据以外的数据,以作为联合训练子集;
基于所述性别识别网络对所述联合训练子集进行学习训练,以获得注重性别式识别结果;
其中,所述语音性别联合识别模型为预先基于联合训练集和联合网络算法训练得到的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京沃丰时代数据科技有限公司,未经北京沃丰时代数据科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210308617.4/1.html,转载请声明来源钻瓜专利网。