[发明专利]行为识别方法、装置、电子设备及计算机存储介质

说明书

本公开实施例公开了一种行为识别方法、装置、电子设备及计算机存储介质，其中，该行为识别方法包括：获取图像帧序列；对所述图像帧序列中检测到的至少一个对象进行跟踪，得到每个对象的跟踪信息；基于所述每个对象的跟踪信息，对所述至少一个对象进行行为识别，得到所述图像帧序列中行为事件的标识；检测所述图像帧序列中参与所述行为事件的至少一个对象的对象信息；将所述行为事件的标识和所述至少一个对象的对象信息关联，得到行为识别结果。

技术领域

本公开实施例涉及但不限于计算机视觉技术领域，尤其涉及一种行为识别方法、装置、电子设备及计算机存储介质。

背景技术

随着人工智能(Artificial Intelligence，AI)算法在智慧城市应用里面的逐步推广，该算法的优势逐渐显示出来：较传统算法更高的准确率，对场景更好的适应性等。由于视频中存在巨大的信息量，因此如何有效地识别视频中的信息变得非常有必要。相关技术仅关注视频中对象的检测，没有关注到需要将检测到的结果中信息的进行关联，使得无法对检测到的对象进行事后溯源。

发明内容

本公开实施例提供一种行为识别方法、装置、电子设备及计算机存储介质。

第一方面，提供一种行为识别方法，所述方法包括：获取图像帧序列；对所述图像帧序列中检测到的至少一个对象进行跟踪，得到每个对象的跟踪信息；基于所述每个对象的跟踪信息，对所述至少一个对象进行行为识别，得到所述图像帧序列中行为事件的标识；检测所述图像帧序列中参与所述行为事件的至少一个对象的对象信息；将所述行为事件的标识和所述至少一个对象的对象信息关联，得到行为识别结果。

在一些实施例中，所述检测所述图像帧序列中参与所述行为事件的至少一个对象的对象信息，包括：确定所述图像帧序列的每一图像中的存在所述行为事件的事件区域；从所述每一图像中的存在所述行为事件的事件区域中，确定所述至少一个对象的对象信息。

这样，由于能够确定图像帧序列的每一图像中的存在行为事件的事件区域，从而能够在得到的事件区域中确定至少一个对象，缩小了用于检测对象的检测区域，从而能够快速地从事件区域检测到至少一个对象，提高了得到至少一个对象的对象信息的速度。

在一些实施例中，所述至少一个对象的对象信息包括所述至少一个对象的人脸标识和人体标识；所述将所述行为事件的标识和所述至少一个对象的对象信息关联，得到行为识别结果，包括：将所述至少一个对象的人脸标识和人体标识中，属于同一对象的人脸标识和人体标识进行关联，得到关联结果；将所述行为事件的标识和所述关联结果进行关联，得到所述行为识别结果。

这样，通过将属于同一对象的人脸标识和人体标识进行关联，得到关联结果，然后将行为事件的标识和关联结果进行关联得到行为识别结果，从而能够从行为识别结果中获取参与行为事件的人脸和人体，使得信息的检索更加全面。

在一些实施例中，所述将所述至少一个对象的人脸标识和人体标识中，属于同一对象的人脸标识和人体标识进行关联，得到关联结果，包括：在所述图像帧序列的每一图像中，确定参与所述行为事件的每一人脸与每一人体之间的位置关系；基于所述位置关系，将所述至少一个对象的人脸标识和人体标识中，属于同一对象的人脸标识和人体标识进行关联，得到关联结果。

这样，通过确定的参与行为事件的每一人脸与每一人体之间的位置关系，将属于同一对象的人脸标识和人体标识进行关联，从而不仅提供了一种人脸和人体的关联方案，且能够准确的确定关联的人脸和人体。

在一些实施例中，所述将所述至少一个对象的人脸标识和人体标识中，属于同一对象的人脸标识和人体标识进行关联，得到关联结果，包括：从所述至少一个对象的人脸标识和人体标识中，获取属于同一对象的人脸标识和人体标识；向属于同一对象的人脸标识和人体标识对应相同的标签值；其中；不同对象的人脸标识对应不同的标签值，不同对象的人体标识对应不同的标签值；将所述相同的标签值对应的人脸标识和人体标识进行关联，得到所述关联结果。