[发明专利]一种视觉定位方法及装置、存储介质有效

专利信息
申请号: 202010414734.X 申请日: 2020-05-15
公开(公告)号: CN111627065B 公开(公告)日: 2023-06-20
发明(设计)人: 周宇豪;蒋燚;李姬俊男;马标 申请(专利权)人: OPPO广东移动通信有限公司
主分类号: G06T7/73 分类号: G06T7/73;G06V10/75;G06F16/583;G06V10/82;G06N3/0464;G06N3/08;G06N3/0455;G01C11/06
代理公司: 北京派特恩知识产权代理有限公司 11270 代理人: 贾伟;张颖玲
地址: 523860 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 视觉 定位 方法 装置 存储 介质
【权利要求书】:

1.一种视觉定位方法,其特征在于,所述方法包括:

采用已训练的定位网络,确定获取的待定位图像的全局特征描述符和特征点信息;其中,所述已训练的定位网络是采用至少包括两类场景下图像的训练图像集进行训练得到的;

根据所述全局特征描述符,从参考图像库中,确定与所述待定位图像相匹配的相似图像;

根据所述特征点信息,确定所述相似图像与所述待定位图像之间相匹配的特征点,得到匹配对集合;

根据所述匹配对集合,确定所述待定位图像的预测位置信息;

根据所述预测位置信息和所述相似图像的位置信息,确定所述待定位图像的目标位置信息;

所述采用已训练的定位网络,确定获取的待定位图像的全局特征描述符和特征点信息,包括:

采用所述已训练的定位网络中的VLAD层,确定所述待定位图像的全局特征描述符;

采用所述已训练的定位网络中的特征解码器,确定所述待定位图像的特征点信息。

2.根据权利要求1所述的方法,其特征在于,所述采用已训练的定位网络,确定获取的待定位图像的全局特征描述符和特征点信息之前,所述方法还包括:

获取已训练的卷积神经网络;

采用所述卷积神经网络、特征解码器和局部聚合描述符向量VLAD层,搭建待训练的定位网络;

将至少包括两类场景下图像的训练图像集中的训练图像,输入所述待训练的定位网络中,得到所述训练图像的损失;

采用所述训练图像的损失,对所述待训练的定位网络的网络参数进行调整,以使调整后的待训练的定位网络输出的结果的损失满足收敛条件,得到所述已训练的定位网络。

3.根据权利要求2所述的方法,其特征在于,所述采用所述卷积神经网络、特征解码器和局部聚合描述符向量VLAD层,搭建待训练的定位网络,包括:

从所述卷积神经网络中的最后一层卷积层处,接入特征解码器;

将所述神经网络的输出端作为所述特征解码器的输入端,以使所述特征解码器确定所述卷积神经网络的输出结果的特征点信息;

将所述神经网络的输出端作为VLAD层的输入端,以使所述VLAD层确定所述卷积神经网络的输出结果的全局特征描述符,继而完成所述待训练的定位网络的搭建。

4.根据权利要求1所述的方法,其特征在于,所述根据所述全局特征描述符,从参考图像库中,确定与所述待定位图像相匹配的相似图像,包括:

获取所述参考图像库中的参考图像的全局特征描述符;

根据所述参考图像的全局特征描述符和所述待定位图像的全局特征描述符,确定所述参考图像与所述待定位图像之间的相似度;

如果所述相似度大于等于相似度阈值,确定所述参考图像为所述相似图像。

5.根据权利要求1所述的方法,其特征在于,所述根据所述特征点信息,确定所述相似图像与所述待定位图像之间相匹配的特征点,得到匹配对集合,包括:

获取所述相似图像的特征点信息;

根据所述相似图像的特征点信息和所述待定位图像的特征点信息,确定所述相似图像的特征点与所述待定位图像的特征点之间的范数距离;

当所述范数距离满足预设条件时,确定所述相似图像的特征点与所述待定位图像的特征点相匹配,以得到所述匹配对集合。

6.根据权利要求5所述的方法,其特征在于,所述根据所述相似图像的特征点信息和所述待定位图像的特征点信息,确定所述相似图像的特征点与所述待定位图像的特征点之间的范数距离,包括:

根据所述相似图像的特征点信息和所述待定位图像的特征点信息,确定所述相似图像的特征点与所述待定位图像的特征点之间的最小范数距离和第二小范数距离;

对应地,所述当所述范数距离满足预设条件时,确定所述相似图像的特征点与所述待定位图像的特征点相匹配,以得到所述匹配对集合,包括:如果所述最小范数距离和所述第二小范数距离之间的倍数满足预设倍数,确定所述相似图像的特征点与所述待定位图像的特征点相匹配,以得到所述匹配对集合。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010414734.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top