[发明专利]一种情绪预测装置、情绪预测方法及显示装置在审
| 申请号: | 201910796728.2 | 申请日: | 2019-08-27 |
| 公开(公告)号: | CN110516593A | 公开(公告)日: | 2019-11-29 |
| 发明(设计)人: | 于越 | 申请(专利权)人: | 京东方科技集团股份有限公司 |
| 主分类号: | G06K9/00 | 分类号: | G06K9/00;G10L25/63 |
| 代理公司: | 11319 北京润泽恒知识产权代理有限公司 | 代理人: | 李娜<国际申请>=<国际公布>=<进入国 |
| 地址: | 100015 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 情绪 待检测图像 情绪预测 人脸图像 表情 语音 预设时间段 抑郁情绪 预测 表情识别模块 采集语音信号 人脸检测模块 人脸图像识别 图像采集模块 语音采集模块 语音识别模块 语音信号识别 电子设备 情绪状态 显示装置 用户情绪 采集 缓解 检测 统计 | ||
1.一种情绪预测装置,其特征在于,包括:图像采集模块、人脸检测模块、表情识别模块、语音采集模块、语音识别模块和情绪预测模块;
所述图像采集模块,被配置为采集待检测图像;
所述人脸检测模块,被配置为检测所述待检测图像是否包含人脸图像,以及当所述待检测图像包含人脸图像时,提取所述待检测图像中的人脸图像;
所述表情识别模块,被配置为根据所述人脸图像识别用户的表情情绪;
所述语音采集模块,被配置为采集语音信号;
所述语音识别模块,被配置为根据所述语音信号识别所述用户的语音情绪;
所述情绪预测模块,被配置为根据预设时间段内的表情情绪和语音情绪,预测所述用户的情绪状态。
2.根据权利要求1所述的装置,其特征在于,所述人脸检测模块包括灰度化子模块、人脸检测子模块和人脸提取子模块;
所述灰度化子模块,被配置为将所述待检测图像转化为灰度图像;
所述人脸检测子模块,被配置为利用预设的人脸检测模型,检测所述灰度图像是否包含人脸图像;
所述人脸提取子模块,被配置为当所述灰度图像包含人脸图像时,提取所述灰度图像中的人脸图像。
3.根据权利要求1所述的装置,其特征在于,所述表情识别模块包括图像处理子模块、表情特征提取子模块、降维子模块和表情识别子模块;
所述图像处理子模块,被配置为对所述人脸图像进行归一化处理和直方图均衡化处理,得到处理后的人脸图像;
所述表情特征提取子模块,被配置为提取所述处理后的人脸图像中的表情特征;
所述降维子模块,被配置为对所述表情特征进行降维处理,得到降维后的表情特征;
所述表情识别子模块,被配置为利用预设的表情识别模型,根据所述降维后的表情特征识别用户的表情情绪。
4.根据权利要求1所述的装置,其特征在于,所述语音识别模块包括模数转化子模块、噪声滤波子模块、信号处理子模块、语音特征提取子模块和语音识别子模块;
所述模数转化子模块,被配置为将所述语音信号转化为数字信号;
所述噪声滤波子模块,被配置为对所述数字信号进行滤波,得到滤波后的数字信号;
所述信号处理子模块,被配置为对所述滤波后的数字信号进行预加重和加窗分帧处理,得到处理后的数字信号;
所述语音特征提取子模块,被配置为提取所述处理后的数字信号中的语音特征;
所述语音识别子模块,被配置为利用预设的语音识别模型,根据所述语音特征识别所述用户的语音情绪。
5.根据权利要求1所述的装置,其特征在于,所述情绪预测模块包括表情情绪计算子模块、语音情绪计算子模块、情绪值计算子模块和情绪预测子模块;
所述表情情绪计算子模块,被配置为将预设时间段内每种表情情绪出现的次数以及对应的表情情绪分值的乘积和,除以所述预设时间段内所有表情情绪出现的次数,得到表情情绪值;
所述语音情绪计算子模块,被配置为将预设时间段内每种语音情绪出现的次数以及对应的语音情绪分值的乘积和,除以所述预设时间段内所有语音情绪出现的次数,得到语音情绪值;
所述情绪值计算子模块,被配置为对所述表情情绪值和所述语音情绪值进行加权求和,得到情绪结果;
所述情绪预测子模块,被配置为根据所述情绪结果所在的情绪范围,预测所述用户的情绪状态。
6.根据权利要求1所述的装置,其特征在于,所述装置还包括通信模块;
所述通信模块,被配置为将所述用户的情绪状态发送至指定终端。
7.根据权利要求1所述的装置,其特征在于,所述装置还包括画作推送模块;
所述画作推送模块,被配置为当所述用户的情绪状态为抑郁情绪时,从服务器中获取具有指定情绪标签的画作,并在显示屏上显示所述具有指定情绪标签的画作。
8.根据权利要求1所述的装置,其特征在于,所述装置还包括采集周期调节模块;
所述采集周期调节模块,被配置为根据所述人脸检测模块的检测结果调节所述图像采集模块的采集周期。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司,未经京东方科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910796728.2/1.html,转载请声明来源钻瓜专利网。





