[发明专利]基于视频多帧内容分析的黑洞填充技术在审

专利信息
申请号: 201310565932.6 申请日: 2013-11-13
公开(公告)号: CN103561256A 公开(公告)日: 2014-02-05
发明(设计)人: 熊伟华;范澍斐;马燕军 申请(专利权)人: 江苏刻维科技信息有限公司
主分类号: H04N13/00 分类号: H04N13/00
代理公司: 暂无信息 代理人: 暂无信息
地址: 212000 江苏省镇江市新区*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 视频 内容 分析 黑洞 填充 技术
【说明书】:

技术领域

发明涉及图像处理方法,具体涉及一种基于视频多帧内容分析的黑洞填充方法。

背景技术

传统的立体图像生成系统需要传送左眼视图和右眼视图来生成立体图像。基于深度信息的立体图像生成系统(DIBR)能够利用彩色图像及相应的深度图像生成新视点图像。然而,不同深度的各个物体在左右视图图像上的位移不同,从而决定了在生成的新视点视图中会出现形状不规则,尺寸大小不一的增生“黑洞”。对于其中增生“黑洞”的处理,最简单的是直接内插法,但实验结果表明,该方法对大尺寸“洞”的处理效果并不理想,容易造成图像边缘模糊、失真等现象。另一种方法是对深度图像进行预处理。目前应用较为广泛的方法有高斯滤波器法和边缘滤波法。基于深度图像的高斯滤波法可以减少新视图中大尺寸的“黑洞”的数量,但随之也造成了物体竖直边弯曲的现象。

发明内容

本发明提供基于视频多帧内容分析的黑洞填充技术,本发明解决了传统的立体图像生成系统对于其中增生“黑洞”的处理方法,容易造成图像边缘模糊、失真等现象;以及造成了物体竖直边弯曲的现象的问题。

为解决上述问题,本发明采用如下技术方案:基于视频多帧内容分析的黑洞填充技术,假设在这个视频段落中含有N帧图像,它们是带有黑洞的新视图,每幅图像含有已经正确分割的K个物体,即物体分割图。另外一个黑洞填补补偿区域定义图是根据预处理计算并定义了获得的每个“黑洞”像素点需要用来自哪个物体的信息进行补偿。

在这个实现过程中,需要采用业界通用的SIFT技术选在相同物体在2帧图像之间的匹配像素点,计算他们的位移并进行补偿。考虑到噪声的存在,选取的匹配点还需要通过RANSAC方法的过滤以提高匹配的准确性。

对于在图像Fi中的物体Mj,如果某个像素点的R/G/B值已经存在,则采用当前帧中的数据,如果不存在,但是在其它帧中存在,则采用加权平均的方法,来自离Fi越近的像素值具有更高的权重,从而保证视频补偿中的连续性。

本发明实现方法该方法的实现使得右视图中的很多黑洞均可以通过前后帧的信息得以正确地补偿,补偿之后的内容更加自然,大大地提高了系统的自动化程度。

附图说明

图1是本发明流程图。

具体实施方式

下面用最佳的实施例对本发明做详细的说明。

目前业界几乎所有的解决方案都是通过单一的,当前图像的内容来处理的,其总体效果无论如何都会受到一定的限制。然而,在处理视频内容的时候,情况就不一样了。视频内容一般包含有同一场景中的多个图像内容。随着相机的移动或者物体本身的移动,在某一帧被遮挡而需要决定的“黑洞”内容,在其它帧可能完整地出现。在这种情况下,我们的技术团队设计并开发了一种“基于视频环境下多帧图像内容分析的黑洞填充“技术,该方法不只是从当前的图像帧中去“猜测”黑洞内容,通过对图像内各个物体的运动匹配,找到各个物体在当前视频拍摄角度下的完整内容,从而能采用真实的内容进行“黑洞”补偿。

如图1所示,基于视频多帧内容分析的黑洞填充技术,假设在这个视频段落中含有N帧图像,它们是带有黑洞的新视图,每幅图像含有已经正确分割的K个物体,即物体分割图。另外一个黑洞填补补偿区域定义图是根据预处理计算并定义了获得的每个“黑洞”像素点需要用来自哪个物体的信息进行补偿。

在这个实现过程中,需要采用业界通用的SIFT技术选在相同物体在2帧图像之间的匹配像素点,计算他们的位移并进行补偿。考虑到噪声的存在,选取的匹配点还需要通过RANSAC方法的过滤以提高匹配的准确性。

对于在图像Fi中的物体Mj,如果某个像素点的R/G/B值已经存在,则采用当前帧中的数据,如果不存在,但是在其它帧中存在,则采用加权平均的方法,来自离Fi越近的像素值具有更高的权重,从而保证视频补偿中的连续性。

最后应说明的是:显然,上述实施例仅仅是为清楚地说明本发明所作的举例,而并非对实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引申出的显而易见的变化或变动仍处于本发明的保护范围之中。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏刻维科技信息有限公司,未经江苏刻维科技信息有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201310565932.6/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top