[发明专利]一种基于双层融合深度网络的语音情感识别方法在审
| 申请号： | 202210419568.1 | 申请日： | 2022-04-21 |
| 公开（公告）号： | CN114743569A | 公开（公告）日： | 2022-07-12 |
| 发明（设计）人： | 李飞;李斌建;李汀 | 申请（专利权）人： | 南京邮电大学 |
| 主分类号： | G10L25/63 | 分类号： | G10L25/63;G10L25/30;G10L25/18 |
| 代理公司： | 南京正联知识产权代理有限公司 32243 | 代理人： | 张玉红 |
| 地址： | 210023 *** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及一种基于双层融合深度网络的语音情感识别方法，为了获得丰富的交叉模态的信息本发明利用了语音和文本两个模态的特征向量进行寻优融合，捕捉复杂的关联在音频和文本之间进行情感识别。首先将语音和文本信息通过预处理，得到音频和文本特征向量，通过FBP特征融合模块，将音频特征，文本特征做多模态交叉融合，将融合后的特征向量分别经过LSTM,GRU,DNN三个子模型组成的level‑1初级特征编码网络，然后level‑1三个子网络的输出做二次融合，编码高级特征，融合的方法是hadmard积，最后将融合后的特征输入到level‑2的BiLSTM编码网络，最后接分类输出层，预测情感类别。本次提出的融合算法在公开数据集IEMOCAP上实验结果显示达到了80.38％WA和78.62％UA，实现了目前语音情感识别领域较好的结果。 | ||
| 搜索关键词： | 一种 基于 双层 融合 深度 网络 语音 情感 识别 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于南京邮电大学，未经南京邮电大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210419568.1/，转载请声明来源钻瓜专利网。
- 上一篇：一种宠物饲料混合设备
- 下一篇：一种培养皿组件
