[发明专利]视觉注意力的识别方法及系统、存储介质、处理器

权利要求书

1.一种视觉注意力的识别方法，其特征在于，包括：

通过第一摄像头采集目标区域的第一图像信息；

从所述第一图像信息中识别出第一目标对象的面部预定区域；

使用第一模型对所述面部预定区域进行分析，得到所述第一目标对象的面部特征点后，根据所述面部特征点，确定所述第一目标对象的头部姿态及视觉方向，其中，所述第一模型为使用多组数据通过机器学习训练出的，所述多组数据中的每组数据包括以下至少之一：图像和图像中标识出面部特征点；

根据所述头部姿态及所述视觉方向，确定所述第一目标对象的视觉注意力的对象。

2.根据权利要求1所述的方法，其特征在于，所述第一模型包括第一子模型及第二子模型；其中，所述使用第一模型对所述面部预定区域进行分析，得到所述第一目标对象的面部特征点后，根据所述面部特征点，确定所述第一目标对象的头部姿态及视觉方向包括：

使用所述第一子模型对所述面部预定区域进行分析，得到所述第一目标对象的面部特征点，其中，所述第一子模型为使用多组数据通过机器学习训练出的，所述多组数据中的每组数据包括以下至少之一：图像和图像中标识出面部特征点；

根据所述面部特征点，确定所述第一目标对象的头部姿态；

从所述面部特征点中提取眼部特征信息；

使用所述第二子模型对眼部特征信息进行分析，得到所述第一目标对象的所述视觉方向，其中，所述第二子模型为使用多组数据通过机器学习训练出的，所述多组数据中的每组数据均包括：眼部特征信息和眼部特征信息中标识出视觉方向。

3.根据权利要求2所述的方法，其特征在于，所述根据所述面部特征点，确定所述第一目标对象的头部姿态包括：

获取所述面部特征点的坐标及预先存储的标准特征点的坐标；

将所述面部特征点的坐标及所述标准特征点的坐标进行匹配，得到所述头部姿态。

4.根据权利要求1所述的方法，其特征在于，在得到所述第一目标对象的面部特征点后，所述方法还包括：

对所述面部特征点进行归一化处理；

根据归一化处理后的面部特征点，生成面部特征信息，所述面部特征信息包括以下至少之一：眼部闭合角度、嘴部闭合角度。

5.根据权利要求4所述的方法，其特征在于，所述根据所述头部姿态及所述视觉方向，确定所述第一目标对象的视觉注意力的对象包括：

将所述面部特征点、所述头部姿态、面部特征信息及所述视觉方向输入注意力分类器；

获取所述注意力分类器根据所述面部特征点、所述头部姿态、面部特征信息及所述视觉方向确定的所述第一目标对象的视觉注意力的对象。

6.根据权利要求1至5中任一项所述的方法，其特征在于，还包括：

通过第二摄像头采集所述目标区域的第二图像信息；

从所述第二图像信息中识别出第二目标对象的人体预定区域；

使用第二模型对所述人体预定区域进行分析，得到所述第二目标对象的人体特征点，其中，所述第二模型为使用多组数据通过机器学习训练出的，所述多组数据中的每组数据包括以下至少之一：图像和图像中标识出人体特征点；

根据所述人体特征点，确定所述第二目标对象的行为特征。

7.根据权利要求6所述的方法，其特征在于，还包括：

获取当前教学内容的辅助信息，所述辅助信息包括以下至少之一：教学音频信息、教学文字信息。

8.根据权利要求7所述的方法，其特征在于，还包括：

基于所述第一目标对象的视觉注意力的对象、所述第二目标对象的行为特征以及所述辅助信息，得到注意力评估结果，所述注意力评估结果用于指示教学质量。