[发明专利]视频数据处理方法及装置、电子设备和存储介质

权利要求书

1.一种视频数据处理方法，其特征在于，包括：

获得第一帧率的第一视频数据流；

获得所述第一视频数据流中连续两帧视频数据中间时刻的时间，根据所述时间得到连续两帧视频数据间所有事件的运动数据；

根据所述第一视频数据流和所述运动数据，得到第二帧率的第二视频数据流；

所述第二帧率大于所述第一帧率；

其中，所述根据所述第一视频数据流和所述运动数据，得到第二帧率的第二视频数据流，包括：

将所述第一视频数据流和所述运动数据输入视频插帧处理网络；

通过所述视频插帧处理网络对所述第一视频数据流和所述运动数据进行处理，输出得到第二帧率的第二视频数据流；

所述第一视频数据流由第一视频图像序列构成，所述运动数据由事件图像序列构成的情况下，所述通过所述视频插帧处理网络对所述第一视频数据流和所述运动数据进行处理，输出得到第二帧率的第二视频数据流，包括：

从所述第一视频图像序列中获得每两帧连续视频图像数据；

从所述事件图像序列中，获得对应所述每两帧连续视频图像数据的多个事件图像数据；

对所述每两帧连续视频图像数据和所述多个事件图像数据分别进行特征提取，得到特征提取结果；

根据所述特征提取结果对应的卷积核；

根据所述卷积核对所述每两帧连续视频图像数据分别进行卷积处理并求和，得到插入所述每两帧连续视频图像数据的中间帧数据；

在所述每两帧连续视频图像数据的中间时刻插入所述中间帧数据后，由所述每两帧连续视频图像数据和所述中间帧数据构成新的视频流，将所述新的视频流确定为所述第二视频数据流。

2.根据权利要求1所述的方法，其特征在于，所述获得所述第一视频数据流中连续两帧视频数据中间时刻的时间，包括：

从所述第一视频数据流中解析出连续两帧视频图像及所述两帧视频图像分别对应的时间戳；

根据所述两帧视频图像分别对应的时间戳，得到所述时间。

3.根据权利要求1所述的方法，其特征在于，所述根据所述时间得到连续两帧视频数据间所有事件的运动数据，包括：

获得在所述时间对应运动场景中运动光流的光强度变化情况；

根据所述光强度变化情况得到对应事件的运动数据，记录所有事件的运动数据。

4.根据权利要求3所述的方法，其特征在于，所述运动数据包括：事件发生时的时间、事件发生时的位置、和/或事件发生时的属性；

所述事件发生时的属性，用于表征在所述两帧视频图像的中间时刻图像中像素亮度增加或像素亮度减小的属性。

5.根据权利要求1至4中任一项所述的方法，其特征在于，所述根据所述第一视频数据流和所述运动数据，得到第二帧率的第二视频数据流，包括：

从所述第一视频数据流中的多帧视频图像中，得到每两帧连续视频图像；

从所述运动数据中的多个事件图像中，得到所述每两帧连续视频图像中间时刻的对应事件图像；

根据所述每两帧连续视频图像和对应事件图像，得到每两帧视频图像中间时刻的相对运动状态；

根据所述每两帧视频图像中间时刻的相对运动状态，对所述每两帧视频图像进行中间帧的视频插帧处理，得到所述第二视频数据流。

6.根据权利要求5所述的方法，其特征在于，所述根据所述每两帧视频图像中间时刻的相对运动状态，对所述每两帧视频图像进行中间帧的视频插帧处理，得到所述第二视频数据流，包括：

根据所述每两帧视频图像中间时刻的相对运动状态，对所述每两帧视频图像进行卷积并求和，得到插入所述每两帧视频图像中间时刻的中间帧图像。

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

在所述每两帧视频图像的中间时刻插入所述中间帧图像后，由所述每两帧视频图像和所述中间帧图像构成新的视频流，将所述新的视频流确定为所述第二视频数据流。