[发明专利]一种深度信息提取方法及装置

权利要求书

1.一种深度信息提取方法，其特征在于，所述方法包括：

获取视频帧图像信息，所述视频帧图像信息包括第一帧图像信息和第二帧图像信息；

提取所述第一帧图像中的边缘轮廓信息，并将所述第一帧图像信息与所述第二帧图像信息进行匹配得到稀疏光流；

根据所述边缘轮廓信息和所述稀疏光流，计算得到所述第一帧图像信息与所述第二帧图像信息之间的稠密光流；

计算所述稠密光流中的目标像素点的运动矢量、以及所述视频帧图像信息中像素点的最大运动矢量和最小运动矢量；根据所述目标像素点的运动矢量、所述最大运动矢量和所述最小运动矢量，计算所述目标像素点的视差信息，并取所述视差信息的倒数得到初始深度信息，其中，所述视差信息v(i,j)为所述目标像素点的运动矢量，v_max为所述最大运动矢量，v_min为所述最小运动矢量，N为正整数；

对所述初始深度信息中的空洞区域进行修补；根据所述视频帧图像信息，对修补所述空洞区域后的所述初始深度信息进行滤波；对经过滤波处理后的所述初始深度信息进行边缘补偿得到最终深度信息。

2.如权利要求1所述的方法，其特征在于，所述稀疏光流包括多个像素点的光流信息，所述根据所述边缘轮廓信息和所述稀疏光流，计算得到所述第一帧图像信息与所述第二帧图像信息之间的稠密光流包括：

根据所述边缘轮廓信息，确定与所述稠密光流中的目标像素点之间代价距离最小所述多个像素点中的N个像素点，N为大于1的整数；其中，所述边缘轮廓信息为所述视频帧图像信息中运动物体的边缘轮廓，所述边缘轮廓之内的部分属于同一个物体的同一个运动层，所述边缘轮廓之外的部分属于其他物体的其他运动层，在所述边缘轮廓之内同一个物体同一个运动层的像素点之间代价距离小，而与所述边缘轮廓之外的其他像素点之间的代价距离大；

根据所述N个像素点中每个像素点的光流信息以及预置的所述每个像素点的距离权值，计算所述目标像素点的光流信息。

3.如权利要求2所述的方法，其特征在于，所述根据所述N个像素点中每个像素点的光流信息以及预置的所述每个像素点的距离权值，计算所述目标像素点的光流信息包括：

计算所述每个像素点的光流信息与所述每个像素点的距离权值的乘积之和、以及所述每个像素点的距离权值之和；

将所述乘积之和除以所述距离权值之和计算得到比值作为所述目标像素点的光流信息。

4.如权利要求1所述的方法，其特征在于，所述获取视频帧图像信息包括：

在多种像素分辨率下分别采集所述视频帧图像信息；

所述根据所述边缘轮廓信息和所述稀疏光流，计算得到所述第一帧图像信息与所述第二帧图像信息之间的稠密光流包括：

根据各种所述像素分辨率下的所述边缘轮廓信息和所述稀疏光流，计算得到多个稠密光流分量；

对所述多个稠密光流分量进行融合得到所述稠密光流。

5.如权利要求1所述的方法，其特征在于，所述根据所述视频帧图像信息，对修补所述空洞区域后的所述初始深度信息进行滤波包括：

获取所述视频帧图像信息中当前像素点和所述当前像素点支持窗口内的像素点之间的物理空间距离信息和颜色空间距离信息；

根据所述物理空间距离信息、所述颜色空间距离信息以及修补所述空洞区域后的所述初始深度信息，确定经过滤波处理后的所述当前像素点的所述初始深度信息。

6.如权利要求5所述的方法，其特征在于，所述对经过滤波处理后的所述初始深度信息进行边缘补偿得到所述最终深度信息包括：

获取经过滤波处理后的所述当前像素点的初始深度信息以及经过滤波处理前的所述当前像素点支持窗口内的像素点的初始深度信息；

根据经过滤波处理后的所述当前像素点的初始深度信息以及经过滤波处理前的所述当前像素点支持窗口内的像素点的初始深度信息，对所述当前像素点的所述初始深度信息进行边缘补偿。