[发明专利]一种平面视频转立体视频的方法和装置

说明书

技术领域

本发明涉及计算机多媒体技术，特别涉及一种平面视频转立体视频的方法和装置。

背景技术

随着计算机多媒体技术的发展，立体视频得到越来越多的推广和青睐，所谓立体视频，就是双目或者多路视频序列，即包含两路以上视频序列，并且每个视频序列对应帧之间带有视差，能够为观看者提供带有视差信息的左视图序列和右视图序列，这也是观看立体视频时可以产生如临其境的立体感的原因；但是由于直接获取立体视频的难度较大、设备成本较高，并且现有的平面视频内容数量庞大，所以将平面视频转立体视频技术得到了越来越多的重视。

平面视频转立体视频的过程，就是一个将平面视频序列转换为平面视频帧图像序列，然后提取平面视频帧图像序列对应的深度信息得到对应的深度图序列，利用深度信息渲染算法(Depth Image Based Rendering，DIBR)将平面视频帧图像序列和深度图序列渲染生成双目或多路立体视频序列的过程。现有技术主要是通过人机交互实现将平面视频转换为立体视频，具体过程如下：首先将平面视频序列转化成无压缩格式并保存在硬盘中，然后利用opencv的程序将无压缩格式平面视频序列变成一帧帧的平面视频帧图像并保存在硬盘中，再利用手工得到每帧平面视频帧图像的深度图并保存在硬盘中，接着利用深度信息渲染算法把平面视频帧图像序列和深度图序列合成立体视频帧图像序列并保存在硬盘中，最后用opencv的程序将立体视频帧图像序列合成无压缩格式的立体视频帧序列输出。

在实现本发明的过程中，发明人发现现有技术至少存在如下缺点：

现有技术平面视频转立体视频的过程中，每一步骤都需要人工参与，人工参与度高、工作量大，平面视频转立体视频的效率低；并且，每一步骤的中间结果都需要保存在硬盘中，而无压缩格式的视频和图像文件都很大，所以会占用硬盘大量的存储空间。

发明内容

为了减小人工参与度、提高平面视频转立体视频的效率，本发明实施例提供了一种平面视频转立体视频的方法和装置。所述技术方案如下：

一方面，本发明实施例提供了一种平面视频转立体视频的方法，所述方法包括：

打开平面视频序列，获取所述平面视频序列的信息；

调用ffmpeg的视频解码器对所述平面视频序列的信息进行解码，得到所述平面视频帧图像序列；

对所述平面视频帧图像序列进行灰度变换、作差，得到帧差图像序列；

根据所述帧差图像序列，将所述平面视频帧图像序列划分成内容相关的多个子序列；

对所述多个子序列中每个子序列对应的帧差图像序列进行帧差相加积累，得到所述多个子序列中每个子序列的积累帧差图像；

将所述多个子序列中每个子序列的积累帧差图像作为所述多个子序列中每个子序列所包含的所有平面视频序列的深度图，从而得到所述平面视频序列对应的所述深度图序列；

基于所述平面视频帧图像序列和所述深度图序列，利用深度信息渲染算法生成立体视频帧图像序列；

设置所述立体视频序列的参数；

读取所述立体视频帧图像序列，获取所述立体视频帧图像序列的信息；

调用ffmpeg的视频编码器对所述立体视频帧图像序列的信息进行编码，得到所述立体视频序列。

另一方面，本发明实施例提供了一种平面视频转立体视频的装置，所述装置包括：

平面视频帧图像序列获取模块，具体包括平面视频序列信息获取单元和平面视频帧图像序列获取单元，其中，所述平面视频序列信息获取单元，用于打开平面视频序列，获取所述平面视频序列的信息；所述平面视频帧图像序列获取单元，用于在所述平面视频序列信息获取单元得到所述平面视频序列的信息后，调用ffmpeg的视频解码器对所述平面视频序列的信息进行解码，得到所述平面视频帧图像序列；

帧差图像序列获取模块，用于在所述平面视频帧图像序列获取模块得到所述平面视频帧图像序列后，对所述平面视频帧图像序列进行灰度变换、作差，得到帧差图像序列；