[发明专利]一种基于人眼状态识别的疲劳检测方法及装置

权利要求书

1.一种基于人眼状态识别的疲劳检测方法，其特征在于，包括：

获得图像采集设备针对目标人员进行拍摄所采集到的包含所述目标人员的面部的人脸图像；

对所述人脸图像进行检测，检测得到所述人脸图像中面部的面部特征点以及所述面部中人眼的上下眼睑的眼睑特征点，其中，所述面部特征点为：用于表征所述人脸图像中面部各个部位的特征点；

基于预设的三维人脸模型、所述面部特征点以及所述眼睑特征点，构建所述目标人员对应的目标三维人脸模型，其中，所述目标三维人脸模型包括：基于所述眼睑特征点构建的所述人眼的上下眼睑；

基于所述目标三维人脸模型中所述人眼的上下眼睑的三维位置信息，确定所述人眼的上下眼睑之间的当前开闭长度；

基于所述当前开闭长度，确定出所述目标人员的当前疲劳程度；

所述基于预设的三维人脸模型、所述人脸特征点以及所述眼睑特征点，构建所述目标人员对应的目标三维人脸模型的步骤，包括：

从所述预设的三维人脸模型中，确定出预设面部位置处的空间点的空间位置信息，作为待处理空间点的空间位置信息，其中，所述待处理空间点与图像特征点存在对应关系，所述图像特征点为：所述面部特征点和所述眼睑特征点；

利用弱透视投影矩阵以及每一待处理空间点的空间位置信息，确定每一待处理空间点在所述人脸图像中的投影点的投影位置信息；

基于每一待处理空间点的投影点的投影位置信息及每一待处理空间点对应的图像特征点的成像位置信息，构建所述目标人员对应的目标三维人脸模型。

2.如权利要求1所述的方法，其特征在于，所述对所述人脸图像进行检测，检测得到所述人脸图像中面部的面部特征点以及所述面部中人眼的上下眼睑的眼睑特征点的步骤，包括：

对所述人脸图像进行检测，检测得到所述人脸图像中面部的面部特征点；

基于所述面部特征点，从所述人脸图像中确定并截取出所述面部中人眼所在区域，作为人眼图像；

利用预设的眼睑特征点检测模型，从所述人眼图像中检测出所述人眼的上下眼睑的眼睑特征点，其中，所述预设的眼睑特征点检测模型为：基于标注有人眼的上下眼睑的眼睑特征点的样本图像训练所得的模型。

3.如权利要求2所述的方法，其特征在于，所述人眼图像包括左眼图像和右眼图像；

在所述利用预设的眼睑特征点检测模型，从所述人眼图像中检测出所述人眼的上下眼睑的眼睑特征点的步骤之前，所述方法还包括：

对第一图像进行镜像处理，得到镜像图像，其中，所述第一图像为所述左眼图像或所述右眼图像；

对所述镜像图像以及所述人眼图像中未进行镜像处理的图像进行拼接，得到拼接图像；

所述利用预设的眼睑特征点检测模型，从所述人眼图像中检测出所述人眼的上下眼睑的眼睑特征点的步骤，包括：

利用预设的眼睑特征点检测模型，从所述拼接图像中，检测出所述镜像图像中人眼的上下眼睑的眼睑特征点，以及所述未进行镜像处理的图像中人眼的上下眼睑的眼睑特征点；

对所述镜像图像中人眼的上下眼睑的眼睑特征点进行镜像处理，得到镜像后的眼睑特征点，以得到所述人眼图像中的人眼的上下眼睑的眼睑特征点。

4.如权利要求3所述的方法，其特征在于，在所述对第一图像进行镜像处理，得到镜像图像的步骤之前，所述方法还包括：

对所述左眼图像和所述右眼图像进行转正处理，得到转正后的左眼图像和转正后的右眼图像，其中，所述转正处理为：使得待处理图像中的两个眼角点的连线与预设图像坐标系的坐标轴平行，所述待处理图像为所述左眼图像和所述右眼图像；

所述对第一图像进行镜像处理，得到镜像图像的步骤，包括：

对转正后的第一图像进行镜像处理，得到镜像图像。