[发明专利]基于视频多帧内容分析的黑洞填充技术在审
申请号: | 201310565932.6 | 申请日: | 2013-11-13 |
公开(公告)号: | CN103561256A | 公开(公告)日: | 2014-02-05 |
发明(设计)人: | 熊伟华;范澍斐;马燕军 | 申请(专利权)人: | 江苏刻维科技信息有限公司 |
主分类号: | H04N13/00 | 分类号: | H04N13/00 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 212000 江苏省镇江市新区*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 视频 内容 分析 黑洞 填充 技术 | ||
技术领域
本发明涉及图像处理方法,具体涉及一种基于视频多帧内容分析的黑洞填充方法。
背景技术
传统的立体图像生成系统需要传送左眼视图和右眼视图来生成立体图像。基于深度信息的立体图像生成系统(DIBR)能够利用彩色图像及相应的深度图像生成新视点图像。然而,不同深度的各个物体在左右视图图像上的位移不同,从而决定了在生成的新视点视图中会出现形状不规则,尺寸大小不一的增生“黑洞”。对于其中增生“黑洞”的处理,最简单的是直接内插法,但实验结果表明,该方法对大尺寸“洞”的处理效果并不理想,容易造成图像边缘模糊、失真等现象。另一种方法是对深度图像进行预处理。目前应用较为广泛的方法有高斯滤波器法和边缘滤波法。基于深度图像的高斯滤波法可以减少新视图中大尺寸的“黑洞”的数量,但随之也造成了物体竖直边弯曲的现象。
发明内容
本发明提供基于视频多帧内容分析的黑洞填充技术,本发明解决了传统的立体图像生成系统对于其中增生“黑洞”的处理方法,容易造成图像边缘模糊、失真等现象;以及造成了物体竖直边弯曲的现象的问题。
为解决上述问题,本发明采用如下技术方案:基于视频多帧内容分析的黑洞填充技术,假设在这个视频段落中含有N帧图像,它们是带有黑洞的新视图,每幅图像含有已经正确分割的K个物体,即物体分割图。另外一个黑洞填补补偿区域定义图是根据预处理计算并定义了获得的每个“黑洞”像素点需要用来自哪个物体的信息进行补偿。
在这个实现过程中,需要采用业界通用的SIFT技术选在相同物体在2帧图像之间的匹配像素点,计算他们的位移并进行补偿。考虑到噪声的存在,选取的匹配点还需要通过RANSAC方法的过滤以提高匹配的准确性。
对于在图像Fi中的物体Mj,如果某个像素点的R/G/B值已经存在,则采用当前帧中的数据,如果不存在,但是在其它帧中存在,则采用加权平均的方法,来自离Fi越近的像素值具有更高的权重,从而保证视频补偿中的连续性。
本发明实现方法该方法的实现使得右视图中的很多黑洞均可以通过前后帧的信息得以正确地补偿,补偿之后的内容更加自然,大大地提高了系统的自动化程度。
附图说明
图1是本发明流程图。
具体实施方式
下面用最佳的实施例对本发明做详细的说明。
目前业界几乎所有的解决方案都是通过单一的,当前图像的内容来处理的,其总体效果无论如何都会受到一定的限制。然而,在处理视频内容的时候,情况就不一样了。视频内容一般包含有同一场景中的多个图像内容。随着相机的移动或者物体本身的移动,在某一帧被遮挡而需要决定的“黑洞”内容,在其它帧可能完整地出现。在这种情况下,我们的技术团队设计并开发了一种“基于视频环境下多帧图像内容分析的黑洞填充“技术,该方法不只是从当前的图像帧中去“猜测”黑洞内容,通过对图像内各个物体的运动匹配,找到各个物体在当前视频拍摄角度下的完整内容,从而能采用真实的内容进行“黑洞”补偿。
如图1所示,基于视频多帧内容分析的黑洞填充技术,假设在这个视频段落中含有N帧图像,它们是带有黑洞的新视图,每幅图像含有已经正确分割的K个物体,即物体分割图。另外一个黑洞填补补偿区域定义图是根据预处理计算并定义了获得的每个“黑洞”像素点需要用来自哪个物体的信息进行补偿。
在这个实现过程中,需要采用业界通用的SIFT技术选在相同物体在2帧图像之间的匹配像素点,计算他们的位移并进行补偿。考虑到噪声的存在,选取的匹配点还需要通过RANSAC方法的过滤以提高匹配的准确性。
对于在图像Fi中的物体Mj,如果某个像素点的R/G/B值已经存在,则采用当前帧中的数据,如果不存在,但是在其它帧中存在,则采用加权平均的方法,来自离Fi越近的像素值具有更高的权重,从而保证视频补偿中的连续性。
最后应说明的是:显然,上述实施例仅仅是为清楚地说明本发明所作的举例,而并非对实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引申出的显而易见的变化或变动仍处于本发明的保护范围之中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏刻维科技信息有限公司,未经江苏刻维科技信息有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310565932.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种医疗物联网基础架构系统
- 下一篇:一种LED灯条的散热结构
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法