[发明专利]违规丢弃垃圾行为检测方法、装置及应用

权利要求书

1.一种违规丢弃垃圾行为检测方法，其特征在于，包括：

获取连续多帧监控视频图像；

获取同时存在至少一垃圾检测框和至少一人体检测框的所述监控视频图像得到第一待检测图像集合；

提取所述连续多帧监控视频图像的视频特征图，所述第一待检测图像的所述垃圾检测框映射于所述视频特征图得到对应的垃圾特征图，所述第一待检测图像的所述人体检测框映射于所述视频特征图得到对应的人体特征图；

将所述垃圾特征图输入第一垃圾特征图卷积层中进行卷积得到第一垃圾特征图，将所述人体特征图输入第一人体特征图卷积层中进行卷积得到第一人体特征图，将所述人体特征图输入第二人体特征图卷积层中进行卷积得到第二人体特征图，将所述第一垃圾特征图和所述第一人体特征图输入第一Scale层相乘得第一特征，将所述第一特征经过激活函数操作后得到交互特征值，将所述交互特征值和所述第二人体特征图共同输入第二Scale层相乘得到第二特征，将所述第二特征输入全连接层后得到所述交互特征；

对所述交互特征进行分类获得分类结果，基于所述分类结果确定违规丢弃垃圾行为。

2.根据权利要求1所述的违规丢弃垃圾行为检测方法，其特征在于，所述交互特征表征每一所述人体特征图和每一所述垃圾特征图的交互性。

3.根据权利要求1所述的违规丢弃垃圾行为检测方法，其特征在于，获取所述第一待检测图像集合中的每一所述第一待检测图像的交互特征，遍历所述交互特征的分类结果。

4.根据权利要求1所述的违规丢弃垃圾行为检测方法，其特征在于，若存在所述违规丢弃垃圾行为，获取所述交互特征对应的所述人体检测框确定行为人。

5.一种违规丢弃垃圾行为检测装置，其特征在于，包括：

监控视频图像获取单元，用于获取连续多帧监控视频图像；

第一待检测图像获取单元，用于获取同时存在至少一垃圾检测框和至少一人体检测框的所述监控视频图像得到第一待检测图像集合；

特征图获取单元，用于提取所述连续多帧监控视频图像的视频特征图，所述第一待检测图像的所述垃圾检测框映射于所述视频特征图得到对应的垃圾特征图，所述第一待检测图像的所述人体检测框映射于所述视频特征图得到对应的人体特征图；

交互特征获取单元，用于将所述垃圾特征图输入第一垃圾特征图卷积层中进行卷积得到第一垃圾特征图，将所述人体特征图输入第一人体特征图卷积层中进行卷积得到第一人体特征图，将所述人体特征图输入第二人体特征图卷积层中进行卷积得到第二人体特征图，将所述第一垃圾特征图和所述第一人体特征图输入第一Scale层相乘得第一特征，将所述第一特征经过激活函数操作后得到交互特征值，将所述交互特征值和所述第二人体特征图共同输入第二Scale层相乘得到第二特征，将所述第二特征输入全连接层后得到所述交互特征；

行为判断单元，用于对所述交互特征进行分类获得分类结果，基于所述分类结果确定违规丢弃垃圾行为。

6.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行权利要求1到4任一所述的违规丢弃垃圾行为检测方法。

7.一种计算机程序产品，其特征在于，包括软件代码部分，当所述计算机程序产品在计算机上被运行时，所述软件代码 部分用于执行根据权利要求1-4任一项所述的违规丢弃垃圾行为检测方法。

8.一种可读存储介质，其特征在于，所述可读存储介质中存储有计算机程序，所述计算机程序包括用于控制过程以执行过程的程序代码，所述过程包括根据权利要求1至4任一项所述的违规丢弃垃圾行为检测方法。