[发明专利]一种注意力检测方法及装置

权利要求书

1.一种注意力检测方法，其特征在于，包括：

获取关于用户的原始视频；所述原始视频包括多帧原始图像；

将多帧所述原始图像分别导入关键点提取网络，输出关键点图像；

将所述关键点图像导入姿态识别网络，输出姿态信息；

根据所述原始视频内所有所述原始图像对应的姿态信息，确定用户状态；

基于所述原始视频以及所述用户状态，生成注意力检测结果，并输出所述注意力检测结果。

2.如权利要求1所述的检测方法，其特征在于，所述关键点提取网络包括人体识别层以及关键点识别层；所述将多帧所述原始图像分别导入关键点提取网络，输出关键点图像，包括：

将所述原始图像导入所述人体识别层，从所述原始图像中截取人体图像；

将所述人体图像导入所述关键点识别层，在所述人体图像上提取多个关键点，输出包含多个所述关键点的关键点图像。

3.如权利要求1所述的检测方法，其特征在于，所述姿态信息包括头部旋转向量以及人体旋转向量；所述将所述关键点图像导入姿态识别网络，输出姿态信息，包括：

基于所述关键点图像中的人脸特征信息确定头部旋转向量；

基于所述关键点图像中的人体特征信息确定人体旋转向量。

4.如权利要求3所述的检测方法，其特征在于，所述获取关于用户的原始视频之前，还包括：

获取训练图像集；所述训练图像集包括多个训练图像；

为各个训练图像配置真值姿态信息；所述真值姿态信息包括头部真值旋转向量以及人体真值旋转向量；

分别将各个所述训练图像导入关键点提取网络，输出关键点训练图像；

以所述关键点训练图像为输入，所述真值姿态信息为输出，基于深度学习算法训练所述姿态识别网络。

5.如权利要求3所述的检测方法，其特征在于，所述根据所述原始视频内所有所述原始图像对应的姿态信息，确定用户状态，包括：

基于所述头部旋转向量确定头部姿态；

基于所述人体旋转向量确定人体姿态；

根据所述原始视频内所有所述原始图像对应的头部旋转向量、头部姿态、人体旋转向量以及人体姿态，确定所述用户状态。

6.如权利要求5所述的检测方法，其特征在于，所述根据所述原始视频内所有所述原始图像对应的头部旋转向量、头部姿态、人体旋转向量以及人体姿态，确定所述用户状态，包括：

若所述原始图像与所述原始图像的上一帧原始图像的头部旋转向量的差值大于或等于第一阈值，或所述原始图像与所述原始图像的上一帧原始图像的人体旋转向量的差值大于或等于第一阈值，则将所述原始图像识别为改变帧图像；

和/或，

若所述原始图像对应的头部姿态与所述原始图像的上一帧原始图像对应的头部姿态不同，且所述原始图像与所述原始图像的上一帧原始图像的头部旋转向量的差值大于或等于第二阈值，则将所述原始图像识别为改变帧图像；所述第二阈值小于所述第一阈值；

和/或，

若所述原始图像对应的人体姿态与所述原始图像的上一帧原始图像对应的人体姿态不同，且所述原始图像与所述原始图像的上一帧原始图像的人体旋转向量的差值大于或等于所述第二阈值，则将所述原始图像识别为改变帧图像；

若在所有所述原始图像中，所有所述改变帧图像的占比值大于或等于预设比例，则将所述用户状态识别为注意力不集中。

7.如权利要求1-6任一项所述的检测方法，其特征在于，所述输出所述注意力检测结果，包括：

将所述注意力检测结果发送至用户终端；

指示所述用户终端显示所述注意力检测结果。