[发明专利]音乐情感识别方法、装置、计算机设备及计算机存储介质有效
申请号: | 201810963057.X | 申请日: | 2018-08-22 |
公开(公告)号: | CN109147826B | 公开(公告)日: | 2022-12-27 |
发明(设计)人: | 梅亚琦;刘奡智;王义文;王健宗;肖京 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G10L25/63 | 分类号: | G10L25/63;G10L25/30 |
代理公司: | 北京中强智尚知识产权代理有限公司 11448 | 代理人: | 黄耀威 |
地址: | 518000 广东省深圳市福田街*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音乐 情感 识别 方法 装置 计算机 设备 存储 介质 | ||
1.一种音乐情感识别方法,其特征在于,所述方法包括:
从音频样本数据中提取音频特征数据,所述音频特征数据携带有各个情感维度标注值;
将所述音频特征数据输入至卷积神经网络进行训练,得到情感分类模型,所述情感分类模型用于从音频数据中提取出各个情感维度的局部平移不变特征;
通过所述情感分类模型将音频特征数据分类为各个情感维度的局部平移不变特征;
将所述各个情感维度的局部平移不变特征输入至递归神经网络中进行训练,得到音乐情感识别模型,所述音乐情感识别模型用于识别音频数据在各个情感维度上的音乐情感识别结果;
通过所述音乐情感识别模型对待识别音频数据进行音乐情感识别,得到各个情感维度上的音乐情感识别结果。
2.根据权利要求1所述的方法,其特征在于,在所述从音频样本数据中提取音频特征数据之前,所述方法还包括:
按照预设时间间隔对所述音频样本数据进行分段,得到多段分段音频样本数据;
获取对每段分段音频样本数据所属情感维度的标注值,得到多段携带各个情感维度标注值的分段音频样本数据。
3.根据权利要求1所述的方法,其特征在于,所述卷积神经网络为多层结构的网络模型,所述将所述音频特征数据输入至卷积神经网络进行训练,得到情感分类模型包括:
通过所述卷积神经网络的卷积层提取所述音频特征数据中各个情感维度的局部音频特征信息;
通过所述卷积神经网络的全连接层汇总所述各个情感维度的局部音频特征信息,得到多维度的局部音频特征信息;
通过所述卷积神经网络的池化层对所述多维度的局部音频特征信息进行降维处理,得到各个情感维度的局部平移不变特征;
通过所述卷积神经网络的分类层对所述各个情感维度的局部平移不变特征进行分类,得到情感分类模型。
4.根据权利要求1所述的方法,其特征在于,所述递归神经网络为多层结构的网络模型,所述将所述各个情感维度的局部平移不变特征输入至递归神经网络中进行训练,得到音乐情感识别模型包括:
通过所述递归神经网络的全连接层汇总所述各个情感维度的局部平移不变特征,得到多维度的局部平移不变特征;
通过所述递归神经网络的隐含层根据音频特征数据所携带的各个情感维度标注值来优化所述多维度的局部平移不变特征在各个情感维度上的权重参数;
通过所述递归神经网络的输出层根据所述多维度的局部平移不变特征在各个情感维度上的权重参数,构建用于识别音频数据在各个情感维度上的音乐情感识别模型。
5.根据权利要求4所述的方法,其特征在于,所述递归神经网络的隐含层内设置有双向门控循环单元,所述通过所述递归神经网络的隐含层根据音频特征数据所携带的各个情感维度标注值来优化所述多维度的局部平移不变特征在各个情感维度上的权重参数包括:
通过所述双向门控循环单元学习多维度的局部平移不变特征中的时间信息,并根据所述时间信息训练所述多维度的局部平移不变特征在各个情感维度上的权重参数;
根据所述音频特征数据所携带的各个情感维度标注值来优化所述多维度的局部平移不变特征在各个情感维度上的权重参数。
6.根据权利要求2所述的方法,其特征在于,在根据所述音乐情感识别模型对待识别音频数据进行音乐情感识别,得到音乐情感识别结果之后,所述方法还包括:
根据所述多段携带各个音乐情感维度标注值的分段音频样本数据与音乐情感识别结果,计算所述音乐情感识别模型的均方根误差;
将所述音乐情感识别模型的均方根误差作为衡量所述音乐情感识别模型的统计矩阵,对所述音乐情感识别结果进行校验。
7.根据权利要求6所述的方法,其特征在于,在所述将所述音乐情感识别模型的均方根误差作为衡量所述音乐情感识别模型的统计矩阵,对所述音乐情感识别结果进行校验之后,所述方法还包括:
将所述音乐情感识别模型的均方根误差作为损失函数反馈至所述递归神经网络模型的隐含层,对所述隐含层的权重参数进行更新。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810963057.X/1.html,转载请声明来源钻瓜专利网。