[发明专利]一种基于视觉系统的疲劳判定方法和存储介质

权利要求书

1.一种基于视觉系统的疲劳判定方法，其特征在于，包括以下步骤：

获取视频帧序列；

对所述视频帧序列中的每一帧图像进行人脸识别，在识别到的每一个人脸区域中确定眼睛、嘴部上嘴唇及嘴部下嘴唇的位置，从而基于眼睛、嘴部上嘴唇及嘴部下嘴唇的位置，确定所述眼睛与嘴部下嘴唇之间的距离以及所述眼睛与嘴部上嘴唇之间的距离，进而确定两个距离之间的比值，所述比值用于表征嘴部张合程度；

收集根据所述视频帧序列中的每一帧图像所计算的比值，构建与所述视频帧序列相对应的比值序列；

判断所述比值序列中的比值是否满足预设条件；

当所述比值序列中的比值满足预设条件时，判定人体处于疲劳状态。

2.根据权利要求1所述的方法，其特征在于，判断所述比值序列中的比值是否满足预设条件，具体为：

判断所述比值序列中连续出现大于或等于预设比值阈值的比值的持续时长是否大于或等于预设时长阈值；

当所述持续时长大于或等于预设时长阈值时，判定人体处于疲劳状态。

3.根据权利要求2所述的方法，其特征在于，当所述持续时长小于预设时长阈值时，所述方法还包括以下步骤：

分析头部在所述连续出现大于或等于预设比值阈值的比值的持续时长内的点头频率；

当所述点头频率大于或等于预设点头频率阈值时，判定人体处于疲劳状态。

4.根据权利要求3中所述的方法，其特征在于，当所述点头频率小于预设点头频率阈值时，所述方法还包括以下步骤：

分析眼睛在所述连续出现大于或等于预设比值阈值的比值的持续时长内的眨眼频率和闭合程度；

当所述眨眼频率小于预设眨眼频率阈值且眼睛的闭合度大于预设闭合度阈值时，判定人体处于疲劳状态。

5.根据权利要求4中所述的方法，其特征在于，还包括：

当判定人体处于疲劳状态时，发出疲劳预警信息。

6.根据权利要求1所述的方法，其特征在于，所述对所述视频帧序列中的每一帧图像进行人脸识别，以在识别到的每一个人脸区域中确定眼睛、嘴部上嘴唇及嘴部下嘴唇的位置，具体包括：

对所述视频帧序列中的每一帧图像进行人脸识别，以获得人脸区域；

在获得的每一张人脸区域中获取眼睛子窗口和嘴部子窗口；

对眼睛子窗口和嘴部子窗口进行边缘检测，以在眼睛子窗口中确定眼睛的位置，在嘴部子窗口中确定嘴部上嘴唇的位置和嘴部下嘴唇的位置。

7.根据权利要求6所述的方法，其特征在于：

利用卷积神经网络模型对所述视频帧序列中的每一帧图像进行人脸识别。

8.根据权利要求7所述的方法，其特征在于：

所述眼睛的位置为眼睛中心点的位置；

所述嘴部上嘴唇的位置为嘴部上嘴唇上边界的位置；

所述嘴部下嘴唇的位置为嘴部下嘴唇下边界的位置。

9.根据权利要求8所述的方法，其特征在于：

所述眼睛与嘴部下嘴唇之间的距离为两眼的中心点确定的直线与嘴部下嘴唇下边界所在直线之间的距离；

所述眼睛与嘴部上嘴唇上边界的距离为两眼的中心点确定的直线与嘴部上嘴唇上边界所在直线之间的距离。

10.一种存储介质，所述存储介质存储有计算机程序，其特征在于：所述计算机程序被处理器执行时，实现如权利要求1-9中任一项所述方法的步骤。