[发明专利]一种情绪识别方法、装置、电子设备及存储介质在审
申请号: | 202211384537.3 | 申请日: | 2022-11-07 |
公开(公告)号: | CN115553779A | 公开(公告)日: | 2023-01-03 |
发明(设计)人: | 曾德忠;杨辉;蒋峄;许大辉;谢泽凯 | 申请(专利权)人: | 电科疆泰(深圳)科技发展有限公司 |
主分类号: | A61B5/16 | 分类号: | A61B5/16;A61B5/00;A61B5/01;A61B5/0205;A61B5/021;A61B5/024;A61B5/0531;A61B5/145;A61B5/318 |
代理公司: | 北京惟专知识产权代理事务所(普通合伙) 16074 | 代理人: | 赵星 |
地址: | 518055 广东省深圳市南山区西丽*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 情绪 识别 方法 装置 电子设备 存储 介质 | ||
1.一种情绪识别方法,其特征在于,包括:
实时获取待测人员的生命体征数据,其中,所述待测人员的身体上设有生命体征检测设备;
实时采集待测人员工作区域的人员面部图像信息,其中,所述待测人员工作区域内布置有摄像头;
对所述人员面部图像信息进行人脸识别确定所述待测人员的面部表情数据;
将所述待测人员的生命体征数据和所述待测人员的面部表情数据输入至预先训练的情绪识别模型得到所述待测人员的情绪识别结果;
其中,所述将所述待测人员的生命体征数据和所述待测人员的面部表情数据输入至预先训练的情绪识别模型得到所述待测人员的情绪识别结果的步骤具体包括:
根据生命体征数据的获取时间戳和面部表情数据的采集时间戳对所述待测人员的生命体征数据和所述待测人员的面部表情数据进行时隙同步处理;
将处理后的所述待测人员的生命体征数据和所述待测人员的面部表情数据输入至预先训练的情绪识别模型得到所述待测人员的情绪识别结果。
2.根据权利要求1所述的情绪识别方法,其特征在于,所述生命体征数据包括心率数据、血氧数据、心电数据、血压数据、体温数据、体表阻抗数据和睡眠质量数据的一种或者多种。
3.根据权利要求1所述的情绪识别方法,其特征在于,所述对所述人员面部图像信息进行人脸识别确定所述待测人员的面部表情数据的步骤包括:
利用预先训练的人脸识别模型对所述人员面部图像信息进行识别得到人员身份识别结果;
根据所述人员身份识别结果从所述人员面部图像信息中提取出所述待测人员的面部表情数据。
4.根据权利要求1所述的情绪识别方法,其特征在于,所述情绪识别模型的构建步骤包括:
通过虚拟现实设备诱发训练人员的各种情绪并同时捕捉各个情绪对应的所述训练人员的面部表情数据,同步利用所述生命体征检测设备获取所述训练人员的生命体征数据;
建立所述训练人员的面部表情数据、所述训练人员的生命体征数据与对应情绪的关系得到所述情绪识别模型。
5.根据权利要求4所述的情绪识别方法,其特征在于,利用所述虚拟现实设备中的沉浸式场景、视频和游戏的一种或多种方式诱发所述训练人员的各种情绪。
6.一种情绪识别装置,其特征在于,包括:数据中心,与所述数据中心连接的生命体征检测设备以及摄像头,所述生命体征检测设备设置在待测人员的身体上,所述摄像头布置在待测人员工作区域内;
所述生命体征检测设备用于实时获取所述待测人员的生命体征数据;
所述摄像头用于实时采集所述待测人员工作区域的人员面部图像信息;
所述数据处理中心包括:人脸识别模块,用于对所述人员面部图像信息进行人脸识别确定所述待测人员的面部表情数据;以及情绪识别模块,用于将所述待测人员的生命体征数据和所述待测人员的面部表情数据输入至预先训练的情绪识别模型得到所述待测人员的情绪识别结果;
其中,所述情绪识别模块具体用于根据生命体征数据的获取时间戳和面部表情数据的采集时间戳对所述待测人员的生命体征数据和所述待测人员的面部表情数据进行时隙同步处理;将处理后的所述待测人员的生命体征数据和所述待测人员的面部表情数据输入至预先训练的情绪识别模型得到所述待测人员的情绪识别结果。
7.根据权利要求6所述的情绪识别装置,其特征在于,所述生命体征检测设备为智能腕表,所述智能腕表包括:主控制器,与所述主控制器连接的一个或者多个体征检测模块和无线通信模块,所述体征检测模块为心率血氧测量模块、心电血压测量模块、运动传感器模块、体温测量模块或者人体阻抗测量模块,所述主控制器用于处理所述体征检测模块的测量信号得到生命体征数据,并通过所述无线通信模块将所述生命体征数据上传至所述数据中心。
8.一种电子设备,其特征在于,包括:处理器和存储器,所述存储器上存储有计算机可读指令,所述计算机可读指令被所述处理器执行时实现如权利要求1-5任一项所述的情绪识别方法。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如1-5任一项所述的情绪识别方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电科疆泰(深圳)科技发展有限公司,未经电科疆泰(深圳)科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211384537.3/1.html,转载请声明来源钻瓜专利网。