[发明专利]板书行为识别的方法、装置、设备及存储介质

权利要求书

1.一种板书行为识别的方法，其特征在于，包括步骤：

获取待识别视频的视频帧和所述视频帧的人物检测结果；

根据人物检测结果得出人物的人脸朝向，根据人脸朝向筛选出符合朝向要求的目标人物；

检测目标人物与黑板之间的距离，在目标人物与黑板之间的距离在预设的阈值区间时，判断有板书行为。

2.根据权利要求1所述的板书行为识别的方法，其特征在于，所述人物检测结果包括：人头检测结果和人脸检测结果；

所述根据人物检测结果得出人物的人脸朝向，根据人脸朝向筛选出符合朝向要求的目标人物的过程，包括步骤：

在人头检测结果的对象中过滤掉能够检测到人脸的对象，得到剩余的对象；

将所述剩余的对象确定为目标人物。

3.根据权利要求1所述的板书行为识别的方法，其特征在于，所述检测目标人物与黑板之间的距离，在目标人物与黑板之间的距离在预设的阈值区间时，判断有板书行为的过程，包括步骤：

对视频帧进行全图的深度信息检测；

提取目标人物的深度信息和黑板区域的深度信息，其中，所述黑板区域是预先划定的；

根据目标人物的深度信息、黑板区域的深度信息以及预设的深度阈值，判断是否有板书行为。

4.根据权利要求3所述的板书行为识别的方法，其特征在于，所述人物检测结果包括：人头检测结果；

所述根据目标人物的深度信息、黑板区域的深度信息以及预设的深度阈值，判断是否有板书行为的过程，包括步骤：

计算人头区域的平均深度；

根据黑板区域的深度信息以及预设的深度阈值，得出板书深度区域的最大深度值和最小深度值，计算这两个值与[0,1]的区间的映射关系；

使用所述映射关系将人头区域的平均深度进行映射转换，得到人头区域在黑板区域的相对深度值；

根据相对深度值判断是否有板书行为。

5.根据权利要求1-4任一项所述的板书行为识别的方法，其特征在于，还包括步骤：过滤掉在预设板书范围外的人物检测结果。

6.根据权利要求1或3所述的板书行为识别的方法，其特征在于，所述人物检测结果包括：人脸检测结果和/或人头检测结果。

7.一种板书行为识别的装置，其特征在于，包括：

获取模块，用于获取待识别视频的视频帧和所述视频帧的人物检测结果；

筛选模块，用于根据人物检测结果得出人物的人脸朝向，根据人脸朝向筛选出符合朝向要求的目标人物；

判断模块，用于检测目标人物与黑板之间的距离，在目标人物与黑板之间的距离在预设的阈值区间时，判断有板书行为。

8.根据权利要求7所述的板书行为识别的装置，其特征在于，还包括：

过滤模块，用于过滤掉在预设板书范围外的人物检测结果。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-6中任一所述的方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-6中任一所述的方法。