[发明专利]一种对Kinect深度图像中的空洞进行实时填充的方法

摘要

本发明公开了一种对Kinect深度图像中的空洞进行实时填充的方法，其步骤步骤1，用Kinect摄影机获取拍摄场景的彩色图像和与其对应的深度图像，采用运行期高斯平均法、采用背景差分法，确定前景图像的位置和背景图像的位置；步骤2，利用Kinect深度图像构建最深深度图像，对该最深深度图像中的空洞进行填充；步骤3，将上述最深深度图像的像素替换深度图像的背景像素，实现对深度图像背景的空洞填充；步骤4，利用步骤1获得的前景图像位置，对在Kinect深度图像的前景位置中存在的空洞进行标记，再对标记后的空洞进行实时填充。本发明能够使填充空洞后的深度视频中物体边缘稳定，深度视频无闪烁出现，同时，有效地提高深度图像中空洞的填充速度和图像稳定性。

主权项

一种对Kinect深度图像中的空洞进行实时填充的方法，其特征在于，该方法包括以下步骤：步骤1， 用Kinect摄影机获取拍摄场景的彩色图像和与其对应的深度图像，采用运行期高斯平均法提取彩色图像背景，得到背景图像，再采用背景差分法对Kinect彩色图像进行分割，获得前景图像，确定前景图像的位置和背景图像的位置；步骤2， 利用Kinect深度图像构建最深深度图像(deepest depth image，DDI)，然后，对该最深深度图像中的空洞进行填充，生成空洞填充后的最深深度图像；步骤3， 利用步骤1获得的背景图像位置，将该背景图像位置设为深度图像背景，用上述空洞填充后的最深深度图像的像素替换深度图像的背景像素，从而实现对深度图像背景的空洞填充；步骤4， 利用步骤1获得的前景图像位置，对在Kinect深度图像的前景位置中存在的空洞进行标记，再对标记后的空洞进行实时填充；具体步骤为：步骤1.1：利用步骤1获得的前景图像位置，检测当前Kinect深度图像的前景图像在最深深度图像空洞填充前是否存在空洞，如果存在空洞，则对深度图像的前景图像的空洞进行标记；步骤1.2：对位置为前景图像，且在深度图像中为非空洞的像素，进行数量(m)和像素值统计，获取这些像素的平均像素值，用该平均像素值对标记处进行填充，其表达式为：(1)其中，所述为标记处的深度值，为前景图像位置，m为前景图像中为非空洞的像素个数。