[发明专利]基于单目视觉的定位方法和装置有效
申请号: | 201810685080.7 | 申请日: | 2018-06-28 |
公开(公告)号: | CN110660098B | 公开(公告)日: | 2022-08-12 |
发明(设计)人: | 孙晓峰 | 申请(专利权)人: | 北京京东叁佰陆拾度电子商务有限公司 |
主分类号: | G06T7/73 | 分类号: | G06T7/73 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 张一军;张效荣 |
地址: | 100176 北京市大兴区北京经*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 目视 定位 方法 装置 | ||
1.一种基于单目视觉的定位方法,其特征在于,包括:
提取拍摄的两帧影像的特征点,基于所述特征点确定当前场景的初始化模型,以获得第一初始化地图,包括:提取拍摄的第一帧影像与第二帧影像的FAST角点,以作为特征点;对所述特征点进行匹配,以获得匹配的特征点;根据匹配的特征点,确定第一帧影像与第二帧影像之间的单应变换矩阵和基础变换矩阵;分别确定单应变换矩阵和基础变换矩阵的变换误差,将变换误差小的矩阵作为当前场景的初始化模型;基于所述初始化模型,确定第一初始化地图;
基于拍摄的第一帧影像的位姿信息,对所述第一初始化地图进行三维旋转和平移变换,以获得第二初始化地图;
基于拍摄的第一帧影像与第二帧影像之间的基线长度,对所述第二初始化地图进行尺度变换,以获得第三初始化地图;
确定当前帧影像与该当前帧影像的前一帧影像之间的相对位姿,基于所述相对位姿和第三初始化地图进行定位。
2.根据权利要求1所述的方法,其特征在于,在提取拍摄的两帧影像的特征点之前,所述方法还包括:
标定摄像机的内参数;
基于所述内参数,对拍摄的两帧影像进行畸变差校正。
3.根据权利要求2所述的方法,其特征在于,基于拍摄的第一帧影像的位姿信息,对所述第一初始化地图进行三维旋转和平移变换的过程包括:
根据摄像机与GPS组合导航系统之间的外参数对拍摄的第一帧影像的位姿信息进行校正,以获得第一帧影像的绝对位姿信息;
基于所述第一帧影像的绝对位姿信息,对所述第一初始化地图进行三维旋转和平移变换。
4.根据权利要求1所述的方法,其特征在于,确定当前帧影像与该当前帧影像的前一帧影像之间的相对位姿,基于所述相对位姿和第三初始化地图进行定位的过程包括:
步骤A:根据当前帧影像的位姿信息与该当前帧影像的前一帧影像的位姿信息,确定当前帧影像与该当前帧影像的前一帧影像之间的相对位姿;将所述相对位姿作为初始值,对当前帧影像的特征点以及该当前帧影像的前一帧影像的特征点进行局部区域匹配,以进行初步定位;若初步定位失败,则执行步骤B或步骤C,若初步定位成功,则执行步骤D;
步骤B:根据运动模型确定当前帧影像与该当前帧影像的前一帧影像之间的相对位姿;将所述相对位姿作为初始值,对当前帧影像的特征点以及该当前帧影像的前一帧影像的特征点进行局部区域匹配,以进行初步定位;若初步定位失败,则执行步骤C;
步骤C:对当前帧影像的特征点以及该当前帧影像的前一帧影像的特征点进行全局搜索匹配,以实现初步定位;
步骤D:确定第三初始化地图中的所有三维空间点在当前帧影像上的投影点,基于所述投影点进行局部窗口特征匹配,以获得当前帧影像在第三初始化地图中的精确定位。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
确定出现在当前帧影像并且未出现在该当前帧影像的前一帧影像中的三维空间点的数量;
若所述三维空间点的数量大于或等于第一阈值,则将所述当前帧影像加入所述第三初始化地图,以对所述第三初始化地图进行更新。
6.根据权利要求5所述的方法,其特征在于,在将所述前帧影像加入所述第三初始化地图之后,所述方法还包括:
基于位姿信息,从拍摄的影像中确定与当前帧影像的距离小于第二阈值的影像,以形成候选回环影像集合;
基于所述候选回环影像集合,检测是否存在回环;
若存在,则对回环两端进行融合,以优化所述第三初始化地图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东叁佰陆拾度电子商务有限公司,未经北京京东叁佰陆拾度电子商务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810685080.7/1.html,转载请声明来源钻瓜专利网。