[发明专利]一种群体情感识别方法、装置、智能设备及存储介质有效
| 申请号: | 201811286630.4 | 申请日: | 2018-10-31 |
| 公开(公告)号: | CN109522945B | 公开(公告)日: | 2020-09-25 |
| 发明(设计)人: | 孟锝斌;乔宇;彭小江;曾小星;王锴;张凯鹏 | 申请(专利权)人: | 中国科学院深圳先进技术研究院 |
| 主分类号: | G06K9/62 | 分类号: | G06K9/62;G06K9/00;G06N3/04;G06N3/08 |
| 代理公司: | 深圳中一专利商标事务所 44237 | 代理人: | 高星 |
| 地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 群体 情感 识别 方法 装置 智能 设备 存储 介质 | ||
1.一种群体情感识别方法,其特征在于,所述群体情感识别方法包括:
获取待进行群体情感识别的群体图片;
对所述群体图片进行特征提取,获取所述群体图片的人脸表情特征和人体情感特征,具体包括:对所述群体图片进行特征提取,获取所述群体图片的初始人脸表情特征;根据初始人脸表情特征和对应人脸表情权重,确定所述群体图片的人脸表情特征;所述对应人脸表情权重包括第一人脸表情权重、第二人脸表情权重与第三人脸表情权重,所述根据初始人脸表情特征和对应人脸表情权重,确定所述群体图片的人脸表情特征,包括:
根据所述第一人脸表情权重、所述第二人脸表情权重与所述第三人脸表情权重分别确定所述群体图片的第一人脸表情特征、第二人脸表情特征与第三人脸表情特征;
将所述第一人脸表情特征、所述第二人脸表情特征与所述第三人脸表情特征进行特征融合,根据所述特征融合的结果确定所述群体照片的人脸表情特征,具体地:
根据如下公式确定所述群体图片的第一人脸表情特征:
其中,feature1表示所述第一人脸表情特征,所述Xi表示所述群体照片的第i个初始人脸表情特征,1≤i≤n,所述α'i表示第一人脸表情权重;
根据如下公式确定所述群体图片的第二人脸表情特征:
其中,feature2表示所述第二人脸表情特征,exp是以自然常数e为底的指数函数,1≤i≤n,1≤j≤n,所述βi表示第二人脸表情权重,具体表示所述群体照片中第i个初始人脸表情特征对应的第二人脸表情权重,所述βj表示所述群体照片中第j个初始人脸表情特征对应的第二人脸表情权重;
根据如下公式确定所述群体图片的第三人脸表情特征:
其中,feature3表示所述第三人脸表情特征,1≤i≤n,所述α'i·β'i表示第三人脸表情权重;
将所述第一人脸表情特征feature1、所述第二人脸表情特征feature2与所述第三人脸表情特征feature3进行特征融合,所述群体照片的人脸表情特征根据如下公式确定:
Fface=[feature1,feature2,feature3],
其中,Fface表示所述群体照片的人脸表情特征;
根据所述人脸表情特征和训练好的第一神经网络模型,获取所述群体图片中的人脸表情特征概率;
根据所述人体情感特征和训练好的第二神经网络模型,获取所述群体图片中的人体情感特征概率;
将所述人脸表情特征概率与所述人体情感特征概率进行融合,基于所述融合的结果确定所述群体照片的群体情感。
2.如权利要求1所述的群体情感识别方法,其特征在于,所述对所述群体图片进行特征提取,获取所述群体图片的人脸表情特征和人体情感特征,包括:
检测所述群体图片中的人脸关键点,所述人脸关键点为预先指定的脸部特征点;
根据所述人脸关键点获取所述群体图片中的人脸图片;
对所述人脸图片进行特征提取,获取所述群体图片的人脸表情特征;
检测所述群体图片中的人体关键点,所述人体关键点为预先指定的人体特征点;
根据检测到的所述人体关键点,获取所述群体图片中的人体图片;
对所述人体图片进行特征提取,获取所述群体图片的人体情感特征。
3.如权利要求1所述的群体情感识别方法,其特征在于,所述对所述群体图片进行特征提取,获取所述群体图片的人脸表情特征和人体情感特征,包括:
对所述群体图片进行特征提取,获取所述群体图片的初始人脸表情特征和初始人体情感特征;
根据所述初始人体情感特征和对应人体情感权重,确定所述群体图片的人体情感特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院深圳先进技术研究院,未经中国科学院深圳先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811286630.4/1.html,转载请声明来源钻瓜专利网。





