[发明专利]基于3D视频的时空域运动分割与运动估计方法

说明书

技术领域

本发明涉及三维视频运动分析领域，具体涉及一种在摄像机运动等复杂情况下的基于3D视频的时空域运动分割与运动估计方法。

背景技术

三维视频是指利用3D视频获取系统实时获取的二维图像加上深度信息，即灰度图和深度图。基于三维视频的运动分析，尤其是在摄像机系统运动的情况下基于三维视频的运动分析是计算机视觉一个重要并且富有挑战性的研究方向，其应用领域包括3DTV、机器视觉、视频压缩(MPEG-4)、自动导航等。运动分析包含了运动分割和运动估计两大方面，事实上这是两个紧密相联、相辅相成的课题。一方面，准确的运动分割可以缓解运动估计的不确定性问题，尤其是在运动信息不连续的边缘处；另一方面，运动估计信息又为运动分割提供了重要的依据。

对于三维视频而言，运动分割定义为在一段三维视频上，利用三维空间中的真实运动特性来区分和识别不同运动特性的区域或目标。传统的基于运动的运动分割方法有光流法、帧差法、减背景阈值法等。其中，光流法利用成像平面上的二维运动信息来分割不同的运动目标，它的特点是可以在不需要任何先验的前提下提取出运动信息，并且可以处理背景运动的情况，是较为常用的一种方法。基于光流法的运动分割一般有两种思路：其一是先计算出流场再进行分割；其二是将光流和分割嵌入统一的能量泛函，根据二维光流估算有摄像机引起的背景运动，同时根据边界上的力牵引分割曲线的演变，并通过时空域中二维运动场的几何特性估计运动边界上的光流速率。但是，由于缺少深度信息产生的严重非线性，二维流场本身并不能真实的反映三维空间的运动变化，使得运动估计成为一个病态问题。

发明内容

本发明要解决的技术问题是提供一种运动分析准确可靠、鲁棒性高、无摄像机运动先验依赖、适合复杂运动、应用范围广的基于3D视频的时空域运动分割与运动估计方法。

为解决上述技术问题，本发明采用的技术方案为：

一种基于3D视频的时空域运动分割与运动估计方法，其实施步骤如下：

1)通过3D视频获取系统获取包含运动目标和背景区域的3D视频；

2)建立基于背景三维运动特性的二维运动场参数模型；

3)定义分割曲面，将所述二维运动场参数模型和分割曲面嵌入活动轮廓模型得到基于时空域的目标函数；

4)对所述目标函数进行最小化求解得到3D视频获取系统的运动参数、运动目标的运动参数以及目标曲面。

作为本发明上述技术方案的进一步改进：

所述步骤2)中二维运动场参数模型的约束方程为：

I_op(T，W，x)＝I_x×f_u(T，W)+I_y×f_v(T，W)+I_t＝0’

其中I_op(T，W，x)为3D视频的每一帧图像中像素点x上的光强变化，I_x为图像灰度的横向差分，I_y为图像灰度的纵向差分，I_t为图像灰度的时间差分，T为运动目标的平移变量，W为运动目标的旋转变量，f_u(T，W)为像素点x在x方向上的光流与平移变量T、旋转变量W的关系，f_v(T，W)为像素点x在y方向上的光流与平移变量T、旋转变量W的关系，且f_u(T，W)和f_v(T，W)的表达式为