[发明专利]一种头部动作识别方法、装置、设备及存储介质

权利要求书

1.一种头部动作识别方法，其特征在于，包括：

获取视频流，提取所述视频流各视频帧中的关键点信息；

针对每个所述视频帧，基于所述视频帧中的关键点信息确定关键点在所述视频帧中构成的至少一个头部姿态角的姿态角信息；

基于各视频帧中所述姿态角信息的差异识别头部动作，得到头部动作识别结果。

2.根据权利要求1所述的方法，其特征在于，所述关键点包括左眼特征点、右眼特征点、鼻部特征点、左嘴角特征点、右嘴角特征点，所述基于所述视频帧中的关键点信息确定关键点在所述视频帧中构成的至少一个头部姿态角的姿态角信息，包括：

确定左眼特征点、右眼特征点和鼻部特征点构成的以鼻部特征点为角顶点的第一角度，和左嘴角特征点、右嘴角特征点和鼻部特征点构成的以鼻部特征点为角顶点的第二角度，将所述第一角度和所述第二角度之间的角度差作为第一角度差；

确定左眼特征点、左嘴角特征点、鼻部特征点构成的以鼻部特征点为角顶点的第三角度，和右眼特征点、右嘴角特征点、鼻部特征点构成的以鼻部特征点为角顶点的第四角度，将所述第三角度和所述第四角度之间的角度差作为第二角度差；

确定左眼特征点和右眼特征点连线与水平线的夹角作为第五角度；

将所述第一角度差的角度信息、所述第二角度差的角度信息和所述第五角度的角度信息作为所述头部姿态角的姿态角信息。

3.根据权利要求2所述的方法，其特征在于，所述基于各视频帧中所述姿态角信息的差异识别头部动作，得到头部动作识别结果，包括：

将所述视频流根据时间划分为连续的起始视频区间、间隔视频区间和末尾视频区间，所述起始视频区间、所述间隔视频区间和所述末尾视频区间分别包括连续的多个视频帧；

确定起始视频区间的起始区间头部姿态角、间隔视频区间的间隔区间头部姿态角和末尾视频区间的末尾区间头部姿态角，其中，所述起始区间头部姿态角包含起始第一角度差、起始第二角度差和起始第五角度，所述间隔区间头部姿态角包含间隔第一角度差、间隔第二角度差和间隔第五角度，所述末尾区间头部姿态角包含末尾第一角度差、末尾第二角度差和末尾第五角度；

基于所述起始区间头部姿态角、所述间隔区间头部姿态角和所述末区间尾头部姿态角识别头部动作，得到头部动作识别结果。

4.根据权利要求3所述的方法，其特征在于，所述确定起始视频区间的起始区间头部姿态角、间隔视频区间的间隔区间头部姿态角和末尾视频区间的末尾区间头部姿态角，包括：

将所述起始视频区间内各视频帧的头部姿态角的中位数作为所述起始区间头部姿态角；

将所述间隔视频区间内各视频帧的头部姿态角的中位数作为所述间隔区间头部姿态角；

将所述末尾视频区间内各视频帧的头部姿态角的中位数作为所述末尾区间头部姿态角。

5.根据权利要求3所述的方法，其特征在于，所述基于所述起始区间头部姿态角、所述间隔区间头部姿态角和所述末区间尾头部姿态角识别头部动作，得到头部动作识别结果，包括：

当所述起始第一角度差、所述间隔第一角度与所述末尾第一角度依次递增，且所述末尾第一角度大于第一阈值时，判定头部动作为抬头，所述第一阈值为正数；

当所述起始第一角度差、所述间隔第一角度差与所述末尾第一角度依次递减，且所述末尾第一角度小于第一阈值的相反数时，判定头部动作为低头。

6.根据权利要求3所述的方法，其特征在于，所述基于所述起始区间头部姿态角、所述间隔区间头部姿态角和所述末区间尾头部姿态角识别头部动作，得到头部动作识别结果，包括：

当所述起始第二角度差、所述间隔第二角度差与所述末尾第二角度差依次递增，和所述末尾第二角度差大于第二阈值时，判定头部动作为向左转动，所述第二阈值为正数；

当所述起始第二角度差、所述间隔第二角度差与所述末尾第二角度差依次递减，且所述末尾第二角度差小于第二阈值的相反数时，判定头部动作为向左转动。