[发明专利]异常行为识别方法和装置

权利要求书

1.一种异常行为识别方法，包括：

获取当前帧图像，其中，所述当前帧图像是对塔机的驾驶室进行图像采集而得到的；

确定所述当前帧图像中的目标人脸检测框，并对所述目标人脸检测框中的人脸图像进行行为分析以得到第一行为分析结果；

确定所述当前帧图像中的两个目标手部检测框，并确定所述当前帧图像中的两个目标操作杆检测框；

根据所述两个目标手部检测框和所述两个目标操作杆检测框进行行为分析，以得到第二行为分析结果；

在所述第一行为分析结果和所述第二行为分析结果中的至少一个分析结果为异常行为的情况下，输出告警信息。

2.根据权利要求1所述的方法，其中，所述根据所述两个目标手部检测框和所述两个目标操作杆检测框进行行为分析，以得到第二行为分析结果，包括：

针对所述两个目标操作杆检测框中的各个目标操作杆检测框，确定所述目标操作杆检测框与所述两个目标手部检测框中的各个目标手部检测框之间的第一重合度；

针对各个目标操作杆检测框，如果均存在第一重合度大于或者等于第一预设重合度阈值的目标手部检测框，则确定所述第二行为分析结果为正常行为。

3.根据权利要求2所述的方法，其中，所述方法还包括：

如果所述两个目标操作杆检测框中的至少一个目标操作杆检测框与各个目标手部检测框之间的第一重合度均小于所述第一预设重合度阈值，则获取与所述当前帧图像相邻的上一帧图像；

确定所述当前帧图像和所述上一帧图像中同一个操作杆对象的目标操作杆检测框之间的第二重合度；

在所述第二重合度小于第二预设重合度阈值的情况下，确定所述第二行为分析结果为异常行为。

4.根据权利要求1所述的方法，其中，所述对所述目标人脸检测框中的人脸图像进行行为分析以得到第一行为分析结果，包括：

从所述当前帧图像中截取所述目标人脸检测中的人脸图像；

将截取的所述人脸图像输入预先训练好的人脸异常行为分类模型中，以得到所述人脸图像的分类结果；

根据所述分类结果，确定所述第一行为分析结果。

5.根据权利要求1-4中任一项所述的方法，其中，所述确定所述当前帧图像中的两个目标手部检测框，包括：

对所述当前帧图像进行手部检测，以得到多个第一候选手部检测框以及各自对应的置信度；

从所述多个第一候选手部检测框中，确定出置信度大于预设置信度阈值的多个第二候选手部检测框；

将所述多个第二候选手部检测框中置信度最高的两个第二候选手部检测框作为所述两个目标手部检测框。

6.根据权利要求1-4中任一项所述的方法，其中，所述确定所述当前帧图像中的两个目标操作杆检测框，包括：

对所述当前帧图像进行操作杆检测，以得到多个第一候选操作杆检测框以及各自对应的置信度；

从所述多个第一候选操作杆检测框中，确定出置信度大于预设置信度阈值的多个第二候选操作杆检测框；

将所述多个第二候选操作杆检测框中置信度最高的两个第二候选操作杆检测框作为所述两个目标操作杆检测框。

7.一种异常行为识别装置，包括：

获取模块，用于获取当前帧图像，其中，所述当前帧图像是对塔机的驾驶室进行图像采集而得到的；

第一分析模块，用于确定所述当前帧图像中的目标人脸检测框，并对所述目标人脸检测框中的人脸图像进行行为分析以得到第一行为分析结果；

确定模块，用于确定所述当前帧图像中的两个目标手部检测框，并确定所述当前帧图像中的两个目标操作杆检测框；

第二分析模块，用于根据所述两个目标手部检测框和所述两个目标操作杆检测框进行行为分析，以得到第二行为分析结果；

输出模块，用于在所述第一行为分析结果和所述第二行为分析结果中的至少一个分析结果为异常行为的情况下，输出告警信息。