[发明专利]双模态情感识别模型训练方法及双模态情感识别方法有效
申请号: | 201910851155.9 | 申请日: | 2019-09-09 |
公开(公告)号: | CN110556129B | 公开(公告)日: | 2022-04-19 |
发明(设计)人: | 邹月娴;张钰莹;甘蕾 | 申请(专利权)人: | 北京大学深圳研究生院 |
主分类号: | G10L25/63 | 分类号: | G10L25/63;G10L25/30;G06V10/774;G06N3/04 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 张磊 |
地址: | 518000 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请提供了一种双模态情感识别模型训练方法及双模态情感识别方法,其中,该双模态情感识别模型训练方法包括:将语音训练数据输入第一神经网络模型进行训练,以得到语音情感识别模型;将图像训练数据输入第二神经网络模型,采用第一损失函数进行第一阶段的有监督训练,以得到第一阶段的初始图像情感识别模型;将图像训练数据输入第一阶段的初始图像情感识别模型,采用第二损失函数进行第二阶段的有监督训练,以得到目标图像情感识别模型,将所述语音情感识别模型及所述目标图像情感识别模型进行决策级融合,以得到双模态情感识别模型。 | ||
搜索关键词: | 双模 情感 识别 模型 训练 方法 | ||
【主权项】:
1.一种双模态情感识别模型训练方法,其特征在于,包括:/n将语音训练数据输入第一神经网络模型进行训练,以得到语音情感识别模型;/n将图像训练数据输入第二神经网络模型,采用第一损失函数进行第一阶段的有监督训练,以得到第一阶段的初始图像情感识别模型;/n将所述图像训练数据输入所述第一阶段的初始图像情感识别模型,采用第二损失函数进行第二阶段的有监督训练,以得到目标图像情感识别模型;/n将所述语音情感识别模型及所述目标图像情感识别模型进行决策级融合,以得到双模态情感识别模型。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京大学深圳研究生院,未经北京大学深圳研究生院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910851155.9/,转载请声明来源钻瓜专利网。