[发明专利]一种在视频聊天的表情显示方法及系统

说明书

本发明公开了一种在线视频聊天的表情显示方法及系统，首先获取在线视频聊天端的拍摄装置所拍摄的聊天者聊天时的面部的表情图像，分别对各个拍摄装置的表情图像进行处理，先将表情图像进行表情分类处理，再将表情图像输入至分类到的表情所对应的强度处理子模型进行处理，得到分类到的表情的强度，根据预设的转换关系，将得到各表情分类以及对应的表情的强度转换为表情图片/动画显示出来。本发明基于表情识别做出表情强度的估计，准确获知在线聊天者在聊天时的表情类别和强度水平，反映出用户在视频聊天时的情感状况，有助于增强聊天的互动效果，能更直观的了解聊天对象的实时状态或者是聊天时的趣味性。

技术领域

本发明涉及领域视频聊天领域，更具体地说，涉及一种在线视频聊天的表情显示方法及系统。

背景技术

随着网络科技的发展，视频通讯越来越普及，越来越多的领域采用视频通讯方法，包括网络聊天、视频会议、远程教学等方面。视频通讯拉近了人与人之间的距离，若是在视频交流过程当中可以了解更多对方的情感、心理活动将会大大降低交流误会、促进人与人之间的交流。

人脸识别，是基于人的脸部特征信息进行身份识别的一种生物识别技术。用摄像机或摄像头采集含有人脸的图像或视频流，并自动在图像中检测和跟踪人脸，进而对检测到的人脸进行脸部的二系列相关技术，通常也叫做人像识别、面部识别。人们通过做一些表情把内心感受表达给对方看，在人们做的不同表情之间，或是某个表情里，脸部会泄露出其它的信息。

然而在目前的在线视频聊天中，只是提供了实时传输视频图像的功能，不具备判断聊天用户的情感状态和表情强度的功能。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述目前的在线视频聊天中，只是提供了实时传输视频图像的功能，不具备判断聊天用户的情感状态和表情强度的功能的缺陷，提供一种在线视频聊天的表情显示方法及系统。

本发明解决其技术问题，所采用的在线视频聊天的表情显示方法，包含如下步骤：

S1、获取在线视频聊天端的拍摄装置所拍摄的聊天者聊天时的面部的表情图像；

S2、分别对各个拍摄装置的表情图像进行处理；对任一个拍摄装置的表情图像进行处理的方法如下：先将表情图像进行表情分类处理，再将表情图像输入至分类到的表情所对应的强度处理子模型进行处理，得到分类到的表情的强度，其中一个表情分类下的强度处理子模型中具有该表情分类的多个强度；

S3、根据预设的转换关系，将步骤S2得到各表情分类以及对应的表情的强度转换为表情图片/动画显示出来。

进一步地，在本发明的所采用的在线视频聊天的表情显示方法中，将步骤S2得到各表情分类以及对应的表情的强度转换为表情图片/动画显示出来包括：

将表情图片/动画在聊天视频显示装置上进行本地显示；或者，

将表情图片/动画发送至聊天对象的聊天视频显示装置上进行显示。

进一步地，在本发明的所采用的在线视频聊天的表情显示方法中，还包括分别训练各个强度处理子模型的步骤，任意一个强度处理子模型的训练步骤包括：

A1、获取某一表情分类下的用于训练的包含人面部分的表情数据库，所述表情数据库包含具有面部表情强度标签的数据库与无面部表情强度标签的数据库；

A2、对所述表情数据库中的图像数据进行预处理，提取出人面部分的数据；

A3、对提取出的人面部分的数据分别进行面部几何特征、局部二值模式和Gabor小波变换三种模式的特征提取；

A4、分别使用全监督模式、半监督模式和无监督模式对步骤A3输出的数据进行训练，得到特征与面部表情强度的关系；