[发明专利]一种基于多模深度学习的双模态情感识别方法在审
| 申请号： | 201910951187.6 | 申请日： | 2019-10-08 |
| 公开（公告）号： | CN111242155A | 公开（公告）日： | 2020-06-05 |
| 发明（设计）人： | 赵小明;张石清 | 申请（专利权）人： | 台州学院 |
| 主分类号： | G06K9/62 | 分类号： | G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 杭州杭诚专利事务所有限公司 33109 | 代理人： | 尉伟敏 |
| 地址： | 318000 浙*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及语音和图像处理、模式识别领域，公开了一种基于多模深度学习的双模态情感识别方法，包括步骤：A)分别获得音频和视频RGB图像三通道输入矩阵，获得音频数据样本和视频数据样本；B)构建音频深度卷积神经网络和视频深度卷积神经网络，获得高层次音频特征和获得高层次视频特征；C)建立由全连接层构成的融合网络，构建高层次音视频统一特征；D)将融合网络最后一层全连接层输出的音视频统一特征聚合成全局特征，将全局特征输入到分类器中，获得音视频情感识别分类结果。本发明采用了全连接层构成的融合网络，实现对音视频情感信息的融合，构建高层次的音视频统一特征表示，有效地提高音视频情感识别性能。 | ||
| 搜索关键词： | 一种 基于 深度 学习 双模 情感 识别 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于台州学院，未经台州学院许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910951187.6/，转载请声明来源钻瓜专利网。
