[发明专利]高效利用内存的高精度三维重建方法与系统及设备有效

专利信息
申请号: 201810200698.X 申请日: 2018-03-12
公开(公告)号: CN108564652B 公开(公告)日: 2020-02-14
发明(设计)人: 刘养东;高伟;胡占义 申请(专利权)人: 中国科学院自动化研究所
主分类号: G06T17/00 分类号: G06T17/00;G06T5/00
代理公司: 11482 北京瀚仁知识产权代理事务所(普通合伙) 代理人: 郭文浩;关芳
地址: 100190 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 深度图 三维重建 系统及设备 高效利用 内存占用 平面信息 深度梯度 相机姿态 体素 内存 计算机视觉领域 相机坐标系 光线投影 三维模型 深度图像 实际表面 融合 标准差 表面点 法向量 哈希表 前一帧 体数据 分配 降噪 配准 像素 噪声 检索 三维 视角 检测 重建
【权利要求书】:

1.一种高效利用内存的高精度三维重建方法,其特征在于,包括以下步骤:

步骤S1,获取一幅当前的深度图像,计算所述当前的深度图像中各像素在相机坐标系下的三维点坐标和法向量;并计算各像素的深度噪声的标准差和深度梯度;

步骤S2,根据各像素对应的所述三维点坐标和法向量,以及所述深度噪声的标准差和所述深度梯度,对所述当前的深度图像进行降噪处理;

步骤S3,通过ICP算法配准所述当前的深度图像和对三维模型在前一帧视角下进行光线投影生成的深度图,计算出所述当前的深度图像对应的相机姿态;

步骤S4,基于TSDF算法,根据所述当前的深度图像对应的相机姿态,以及各像素对应的所述三维点坐标和法向量、所述深度噪声的标准差,将所述当前的深度图像融合到当前的三维模型中;

步骤S5,基于光线投影算法从当前的三维模型中抽取表面点集,并根据所述表面点集进行场景渲染;所述表面点集还用于计算下一帧深度图像对应的相机姿态。

2.根据权利要求1所述的高精度三维重建方法,其特征在于,步骤S2中“根据各像素对应的所述三维点坐标和法向量,以及所述深度噪声的标准差和所述深度梯度,对所述当前的深度图像进行降噪处理”,进一步包括:

步骤S21,根据各像素点的所述深度梯度,检测局部平面,并将所述局部平面合并到全局平面;

步骤S22,根据各像素对应的所述三维点坐标和法向量,以及所述深度噪声的标准差,计算各像素对应的射线与其对应的全局平面之间的交点,从而对所述当前的深度图像进行降噪处理。

3.根据权利要求2所述的高精度三维重建方法,其特征在于,步骤S21中“根据各像素点的所述深度梯度,检测局部平面,并将所述局部平面合并到全局平面”,进一步包括:

步骤S211,将所述当前的深度图像平均分成大小为W×W的多个子窗口,根据各像素点的所述深度梯度,计算每一个子窗口中像素的平均梯度;

步骤S212,对每一个子窗口,判断其中各像素点的所述深度梯度与该子窗口中像素的所述平均梯度之差是否小于预设的梯度差阈值,若是,则将该像素点对应的三维点加入局部平面的内点集;

步骤S213,若所述局部平面的内点集中内点数大于预设的点数阈值,则进行局部平面的拟合;

步骤S214,若拟合得到的局部平面π与全局平面πj的法向距离与欧拉距离分别满足下列预设的条件:

|p·nj+dj|<ψ

则合并局部平面π与全局平面πj的内点集,并根据合并后的内点集重新拟合全局平面;否则,将局部平面π添加为一个全局平面;

其中,n、nj分别为平面π与全局平面πj的法向量;p为平面π上任一三维点;dj为平面πj到坐标原点的距离;ψ均为预设阈值。

4.根据权利要求3所述的高精度三维重建方法,其特征在于,步骤S22中“根据各像素对应的所述三维点坐标和法向量,以及所述深度噪声的标准差,计算各像素对应的射线与其对应的全局平面之间的交点,从而对所述当前的深度图像进行降噪处理”,具体为:

判断所述当前的深度图像中像素u对应的三维点v(u)与全局平面πj之间是否满足条件:

|v(u)·nj+dj|<ε(u)

若是,则将像素u的深度值优化为其对应的射线与全局平面之间的交点的深度;

其中,距离阈值ε(u)由深度噪声自适应确定:

ε(u)=βσ(u)

β为权重系数;σ(u)为像素u的深度噪声标准差。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所,未经中国科学院自动化研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810200698.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top