[发明专利]视频处理方法、装置、电子设备及可读存储介质

权利要求书

1.一种视频处理方法，其特征在于，包括：

获取待处理视频中至少一帧图像的光流信息；

基于所述至少一帧图像以及所述至少一帧图像的光流信息，提取所述至少一帧图像的运动特征；

基于所述至少一帧图像的运动特征，确定所述待处理视频中存在事件发生的视频片段；

根据存在事件发生的视频片段，对所述待处理视频进行相应的处理。

2.根据权利要求1所述的方法，其特征在于，对于所述至少一帧图像中的任一帧图像，基于该帧图像以及该帧图像的光流信息，提取该帧图像的运动特征，包括：

基于该帧图像，经由级联的若干第一特征提取层提取该帧图像的至少一个层级的语义特征；

基于该帧图像的光流信息，经由级联的若干第二特征提取层提取该帧图像的至少一个层级的运动特征；

其中，至少一个第二特征提取层将相应层级的运动特征和语义特征融合后输出。

3.根据权利要求2所述的方法，其特征在于，第一特征提取层的输出通道数小于相应层级的第二特征提取层的输出通道数。

4.根据权利要求2所述的方法，其特征在于，至少一个第二特征提取层将相应层级的运动特征和语义特征融合后输出，包括：

至少一个第二特征提取层将相应层级的运动特征和语义特征融合，得到融合特征；

经由权重确定网络，确定所述融合特征对应的权重信息；

根据所述权重信息，对融合特征进行加权处理，得到加权后的融合特征；

输出加权后的融合特征。

5.根据权利要求4所述的方法，其特征在于，所述权重信息包括所述运动特征的第一权重信息以及所述语义特征的第二权重信息；

根据所述权重信息，对融合特征进行加权处理，得到加权后的融合特征，包括：

根据所述第一权重信息和所述第二权重信息，对融合后的特征进行加权处理，得到加权后的融合特征。

6.根据权利要求1至5中任一项所述的方法，其特征在于，还包括：

基于所述至少一帧图像的光流信息，获取所述至少一帧图像的全局光流特征；

将提取的所述至少一帧图像的运动特征和所述全局光流特征进行融合，基于融合后的特征得到所述至少一帧图像的运动特征。

7.根据权利要求1所述的方法，其特征在于，对于所述至少一帧图像中的任一帧图像，获取该帧图像的光流信息，包括：

确定该帧图像的运动区域；

基于该帧图像中的运动区域和该帧图像的后一帧图像中与该运动区域对应的图像区域，进行稠密光流计算，得到该帧图像的稠密光流；或者，

基于该帧图像和该帧图像的后一帧图像，计算该帧图像对应的稠密光流，将计算的稠密光流中该帧图像的运动区域部分的光流作为该帧图像的稠密光流。

8.根据权利要求7所述的方法，其特征在于，对于所述至少一帧图像中的任一帧图像，确定该帧图像的运动区域，包括：

基于该帧图像的亮度信息和该帧图像之后设定数量的各帧图像的亮度信息，确定该帧的运动区域。

9.根据权利要求8所述的方法，其特征在于，基于该帧图像的亮度信息和该帧图像之后设定数量的各帧图像的亮度信息，确定该帧图像的运动区域，包括：

将该帧图像和该帧图像之后设定数量的各帧图像分别划分为若干个图像块；

基于该帧图像和该帧图像之后设定数量的各帧图像中相同位置的各图像块的亮度信息，确定该帧图像的运动区域。