[发明专利]视频数据处理方法及装置、电子设备和存储介质

说明书

本公开涉及一种视频数据处理方法及装置、电子设备和存储介质，其中，所述方法包括：获得第一帧率的第一视频数据流；根据第一视频数据流中连续两帧视频数据中间时刻的时间，得到连续两帧视频数据间所有事件的运动数据；利用视频插帧处理网络，对第一视频数据流和运动数据进行处理：对从第一视频数据流中获得的每两帧连续视频图像数据，以及从运动数据中获得的对应每两帧连续视频图像数据的多个事件图像数据分别进行特征提取，得到特征提取结果以及对应的卷积核；根据卷积核进行卷积处理并求和，得到中间帧数据；插入中间帧数据后得到第二帧率的第二视频数据流；第二帧率大于第一帧率。采用本公开，可以方便快捷的得到高帧率的视频数据流。

本申请是在2019年02月26日提交中国专利局、申请号为201910142793.3、申请名称为“视频数据处理方法及装置、电子设备和存储介质”的中国专利申请的分案申请。

技术领域

本公开涉及计算机视觉技术领域，尤其涉及一种视频数据处理方法及装置、电子设备和存储介质。

背景技术

高帧率视频生产问题是计算机视觉领域的基本问题。高帧率视频在许多应用场景中有着重要的应用价值。例如，快速运动场景动作的识别与分析、高帧率的视频播放软件、短视频应用中的超慢动作播放，专业体育运动员技术细节分析等，在这些应用场景中都直接依赖于高帧率的视频数据流，目前可以通过专业高帧率相机来实现。使用专业高帧率相机不仅成本高且操作不便捷，如何方便快捷的得到高帧率的视频数据流，是要解决的问题。

发明内容

本公开提出了一种视频数据处理技术方案。

根据本公开的一方面，提供了一种视频数据处理方法，包括：

获得第一帧率的第一视频数据流；

获得所述第一视频数据流中连续两帧视频数据中间时刻的时间，根据所述时间得到连续两帧视频数据间所有事件的运动数据；

根据所述第一视频数据流和所述运动数据，得到第二帧率的第二视频数据流；

所述第二帧率大于所述第一帧率；

其中，所述根据所述第一视频数据流和所述运动数据，得到第二帧率的第二视频数据流，包括：

将所述第一视频数据流和所述运动数据输入视频插帧处理网络；

通过所述视频插帧处理网络对所述第一视频数据流和所述运动数据进行处理，输出得到第二帧率的第二视频数据流；

所述第一视频数据流由第一视频图像序列构成，所述运动数据由事件图像序列构成的情况下，所述通过所述视频插帧处理网络对所述第一视频数据流和所述运动数据进行处理，输出得到第二帧率的第二视频数据流，包括：

从所述第一视频图像序列中获得每两帧连续视频图像数据；

从所述事件图像序列中，获得对应所述每两帧连续视频图像数据的多个事件图像数据；

对所述每两帧连续视频图像数据和所述多个事件图像数据分别进行特征提取，得到特征提取结果；

根据所述特征提取结果对应的卷积核；

根据所述卷积核对所述每两帧连续视频图像数据分别进行卷积处理并求和，得到插入所述每两帧连续视频图像数据的中间帧数据；

在所述每两帧连续视频图像数据的中间时刻插入所述中间帧数据后，由所述每两帧连续视频图像数据和所述中间帧数据构成新的视频流，将所述新的视频流确定为所述第二视频数据流。

本公开一可能实现方式中，所述获得所述第一视频数据流中连续两帧视频数据中间时刻的时间，包括：

从所述第一视频数据流中解析出连续两帧视频图像及所述两帧视频图像分别对应的时间戳；