[发明专利]行为检测方法、装置、电子设备及存储介质

说明书

本公开提供了一种行为检测方法、装置、电子设备及存储介质，该方法包括：获取待识别的目标视频帧；对各个所述目标视频帧进行特征提取，生成中间特征数据；其中，所述中间特征数据在时间维度上对应有多个提取时间，以及在空间维度上对应有多个通道；将所述中间特征数据中至少一个所述通道的特征数据沿着所述时间维度进行偏移处理，生成目标特征数据；基于所述目标特征数据，确定所述目标视频帧中所述目标对象的行为类别。

技术领域

本公开涉及深度学习技术领域，具体而言，涉及一种行为检测方法、装置、电子设备及存储介质。

背景技术

随着经济的不断发展、基础设施建设的不断完善，各个场所的安保措施越发完善。比如，可以在商场、写字楼、公共交通等场所中设置闸机，通过闸机保障场所的安全性。在闸机为各个场所提供了安全保护的同时，也出现了翻越闸机的违规行为，该违规行为影响了公共秩序，并为场所的安全带来了风险。

因此，提出一种能够对用户的行为进行监测的方法尤为重要。

发明内容

有鉴于此，本公开至少提供一种行为检测方法、装置、电子设备及存储介质。

第一方面，本公开提供了一种行为检测方法，包括：

获取待识别的目标视频帧；

对各个所述目标视频帧进行特征提取，生成中间特征数据；其中，所述中间特征数据在时间维度上对应有多个提取时间，以及在空间维度上对应有多个通道；

将所述中间特征数据中至少一个所述通道的特征数据沿着所述时间维度进行偏移处理，生成目标特征数据；

基于所述目标特征数据，确定所述目标视频帧中所述目标对象的行为类别。

上述方法中，通过在对各个目标视频帧进行特征提取，生成中间特征数据后，可以将中间特征数据中至少一个通道的特征数据沿着时间维度进行偏移处理，生成目标特征数据，使得目标特征数据中时间维度相同的各个通道中，包括不同提取时间对应的特征数据；进而在基于目标特征数据，确定目标视频帧中目标对象的行为类别时，能够有效的捕捉目标对象的行为动作在时间维度上的特征差异，提高了行为检测的准确率。

一种可能的实施方式中，所述方法还包括：

在确定所述目标视频帧中所述目标对象的行为类别为目标行为类别的情况下，生成警示信息。

这里，在检测到目标对象的行为类别属于目标行为类别时，该目标行为类别可以为存在违规行为的类别，比如翻越闸机的行为类别，可以生成警示信息，以便监管人员能够快速的察觉到违规行为，并对目标对象的违规行为进行约束，提高场地安全性。

一种可能的实施方式中，所述获取待识别的目标视频帧，包括：

获取对目标场地进行检测得到的检测视频；

从所述检测视频中选取多个视频帧，并对各个视频帧进行目标检测，确定每个视频帧中包括的目标对象的检测框信息；

基于所述目标对象的检测框信息和所述多个视频帧，生成所述待识别的目标视频帧。

这里，通过对各个视频帧进行目标检测，确定每个视频帧中包括的目标对象的检测框信息；再基于目标对象的检测框信息和多个视频帧，生成待识别的目标视频帧，目标视频帧中包括与目标对象的检测框信息匹配的第一区域，使得后续基于目标视频帧能够较准确的确定目标对象的行为类别。

一种可能的实施方式中，所述从所述检测视频中选取多个视频帧，包括：

对所述检测视频进行解码处理，生成所述检测视频对应的图片流数据；

从所述图片流数据中选取多个视频帧。