[发明专利]基于三点定位方法的多尺寸人脸表情识别方法及装置

说明书

本申请实施例公开了基于三点定位方法的多尺寸人脸表情识别方法及装置，用于准确识别出人脸并进行表情识别，提高了人脸识别模型识别人脸的正确率。本申请实施例方法包括：服务器接收摄像头拍摄的图像信息，所述图像信息中包含有第一人脸数据；所述服务器将所述图像信息输入人脸检测器；所述服务器根据人脸检测器检测出所述第一人脸数据中的候选人脸数据；所述服务器对所述候选人脸数据进行三点定位；所述服务器判断所述候选人脸数据是否三点定位成功；若是，则所述服务器确定第二人脸数据；所述服务器将所述第二人脸数据输入至表情识别模型；所述服务器利用所述表情识别模型输出所述第二人脸数据所具有的表情。

技术领域

本申请涉及人脸识别技术，特别涉及人脸表情识别技术。

背景技术

人脸表情是人类交流的一种有效表达方式，影视剧娱乐公司为了促进文化和自身公司的商业发展，提升公演和播放的影视剧作品的价值至关重要，其中，通过分析观众在观剧时的表情能够有助于公司自身制定更好的战略，并且，通过分析表演过程中观众在观看精彩或失误的片段时的表情，能够促进影视剧作品以及表演者演技的进一步提升。这就需要在环境昏暗、光照闪烁不定的剧场环境中，对观众的表情进行准确的识别。

现有的表情识别的方法中，通常是服务器先使用人脸检测器检测出图像信息中的待进一步检测的人脸数据，然后对待进一步检测的人脸数据进行五点定位，即通过人脸的五个特征点(左眼、右眼、鼻子、左嘴角和右嘴角)，定位成功的人脸数据将会被输入到表情识别模型，并由表情识别模型输出人脸数据所具有的表情。

然而由于剧场的空间很大，拍摄图片时人脸在图片中所占的比例很小，一个人脸可能只有20×20像素，在800万像素的画面可以同时容纳80-120个人脸，因此服务器使用五点定位法对于人脸的关键特征点的捕捉难度非常大，人脸定位的准确度低下，这样就难以得到准确的人脸数据，以至难以准确输出人脸数据的表情。

发明内容

本申请实施例提供了基于三点定位方法的多尺寸人脸表情识别的方法以及装置，能够通过对人脸进行三点定位，准确捕捉人脸的关键特征点，提高了对小人脸定位的准确度，得到更准确的人脸数据和表情数据。

本申请实施例提供了基于三点定位方法的多尺寸人脸表情识别的方法，包括：

服务器接收摄像头拍摄的图像信息，所述图像信息中包含有第一人脸数据；

所述服务器将所述图像信息输入人脸检测器；

所述服务器根据人脸检测器检测出所述第一人脸数据中的候选人脸数据；

所述服务器对所述候选人脸数据进行三点定位；

所述服务器判断所述候选人脸数据是否三点定位成功；

若是，则所述服务器确定第二人脸数据；

所述服务器将所述第二人脸数据输入至表情识别模型；

所述服务器利用所述表情识别模型输出所述第二人脸数据所具有的表情。

可选地，所述三点定位为所述服务器对所述候选人脸数据中的左眼中心、右眼中心以及鼻尖进行定位。

可选地，所述人脸检测器为多尺寸人脸检测器。

可选地，所述表情识别模型是输出为64位的FaceNet。

本申请实施例提供了一种基于三点定位方法的多尺寸人脸表情识别装置，包括：

接收单元，用于接收摄像头拍摄的图像信息，所述图像信息中包含有第一人脸数据；

第一输入单元，用于将所述图像信息输入人脸检测器；

检测单元，用于根据人脸检测器检测出所述第一人脸数据中的候选人脸数据；