[发明专利]一种全景3D视频拼接系统及方法有效
申请号: | 201611146790.X | 申请日: | 2016-12-13 |
公开(公告)号: | CN106657809B | 公开(公告)日: | 2019-11-29 |
发明(设计)人: | 宋呈群;程俊 | 申请(专利权)人: | 深圳先进技术研究院 |
主分类号: | H04N5/247 | 分类号: | H04N5/247;H04N13/204;H04N13/271;H04N13/332;G06T3/40;G06T7/80;G06T7/55 |
代理公司: | 44237 深圳中一专利商标事务所 | 代理人: | 阳开亮<国际申请>=<国际公布>=<进入 |
地址: | 518055 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明属于图像处理技术领域,提供了一种全景3D视频拼接系统及方法,所述系统包括:全景3D摄像机和图像处理模块,所述全景3D摄像机与所述图像处理模块连接;所述全景3D摄像机包括多个深度传感器和多个CCD摄像机;所述图像处理模块包括全景摄像机几何标定单元、图像拼接单元、新视点图像生成单元以及图像空洞填补单元。通过本发明可有效提高全景3D视频的显示效果。 | ||
搜索关键词: | 一种 全景 视频 拼接 系统 方法 | ||
【主权项】:
1.一种全景3D视频拼接系统,其特征在于,所述系统包括:/n全景3D摄像机和图像处理模块,所述全景3D摄像机与所述图像处理模块连接;/n所述全景3D摄像机包括多个深度传感器和多个CCD摄像机,每个CCD摄像机对应一个深度传感器,每个深度传感器获取所对应的CCD摄像机所拍摄的场景RGB图像的深度图像;/n所述图像处理模块包括全景摄像机几何标定单元、图像拼接单元、新视点图像生成单元以及图像空洞填补单元;/n所述CCD摄像机,用于拍摄场景RGB图像;/n所述深度传感器,用于获取所拍摄的场景RGB图像的深度图像;/n所述全景摄像机几何标定单元,用于对两两相邻的CCD摄像机进行几何标定,获取不同深度处对应的单应性矩阵;/n所述图像拼接单元,用于对获取的深度图像采用相应深度的单应性矩阵进行拼接,获得拼接图像,包括:对于某些只有前景变化而背景不变的视频图像,采用光流法对前景进行检测提取,即只需要按照前景图像深度对前景进行拼接处理,背景保持不变;/n所述新视点图像生成单元,用于根据所述深度图像和拼接图像生成新的视点图像;/n所述图像空洞填补单元,用于填补新的视点图像的空洞,并根据填补后的新的视点图像和所述拼接图像生成3D图像对,以便于虚拟现实3D显示,其中所述填补新的视点图像的空洞包括:/n选取新的视点图像的一个空洞所在的像素作为目的像素pi,寻找视频前一帧图像中对应该目的像素pi的像素pi′;/n将目的像素pi替换为前一帧对应的像素pi′,以填补新的视点图像的空洞。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳先进技术研究院,未经深圳先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611146790.X/,转载请声明来源钻瓜专利网。