[发明专利]移动机器人基于单目视觉传感器的目标对象跟随方法有效

专利信息
申请号: 201810980715.6 申请日: 2018-08-27
公开(公告)号: CN109166136B 公开(公告)日: 2022-05-03
发明(设计)人: 刘希龙;张茗奕;庞磊;曹志强;徐德 申请(专利权)人: 中国科学院自动化研究所
主分类号: G06T7/20 分类号: G06T7/20;G06T7/246;G06T7/223
代理公司: 北京瀚仁知识产权代理事务所(普通合伙) 11482 代理人: 宋宝库;陈晓鹏
地址: 100190 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 移动 机器人 基于 目视 传感器 目标 对象 跟随 方法
【权利要求书】:

1.一种移动机器人基于单目视觉传感器的目标对象跟随方法,其特征在于,所述方法包括:

步骤101:移动机器人根据目标对象的目标区域获取目标对象的图像;

步骤102:对所述目标对象的图像进行预处理,并利用特征变换得到所述目标对象的图像的特征矩阵;所述特征矩阵为多通道特征矩阵;

步骤103:利用目标跟踪算法确定出所述特征矩阵的响应矩阵,并记录所述响应矩阵中所有元素的最大值;将所述最大值对应于所述响应矩阵中的元素的位置,作为所述目标对象相对于预先获取的初始目标区域的位移坐标,结合所述初始目标区域的中心位置,确定所述目标对象所在位置作为所述目标对象的中心点,其步骤包括:

记录所述响应矩阵中所有元素的最大值;

将所述所有元素的最大值所对应的响应矩阵中的元素的位置作为目标对象相对于上一帧图像在当前帧图像中的位移坐标;

根据所述初始目标区域的中心位置,得到所述目标对象在当前图像帧中的位置,通过如下公式确定所述当前图像帧中目标对象中心点的位置:

(uitar,vitar)=(uitar’,vitar’)+ncell×(ui,vi)

其中,(ui,vi)表示所述目标对象相对于上一帧图像在当前帧图像中第i时刻的位移坐标,(uitar’,vitar’)表示所述初始目标区域在第i时刻的中心位置,(uitar,vitar)表示所述目标对象在当前图像帧中第i时刻的位置,ncell表示FHOG特征参数cell的尺寸;

步骤104:根据所述中心点和所述目标对象的外形框架确定出所述目标对象所在的区域,作为第一区域;判断所述第一区域的面积在所述目标对象的图像中的比例是否大于设定阈值,若是,则执行步骤105,若否,则执行步骤106;

步骤105:确定所述第一区域为所述目标对象的目标区域;

步骤106:以所述中心点的位置为中心构建检测区域,在所述检测区域内重新对所述目标对象进行检测,将检测得到的所述目标对象所在的区域作为第二区域,如果该第二区域的区域面积在所述目标对象的图像中图像面积的比例大于所述设定阈值,则将该第二区域作为所述目标对象的目标区域;

“以所述中心点的位置为中心构建检测区域,在所述检测区域内重新对所述目标对象进行检测,将检测得到的所述目标对象所在的区域作为第二区域”的步骤包括:

以所述中心点的位置为中心构建检测区域;

通过预先构建的SVM模型对所述检测区域内的图像块进行目标对象检测,确定目标框集合;

利用特征提取方法计算所述目标框对应的图像块的所述多通道特征矩阵;

根据KCF跟踪器和所述多通道特征矩阵,计算所述多通道特征矩阵的响应矩阵,并记录所述响应矩阵中元素的最大值;

将包含所述中心点且包含最大元素值的目标框作为有效目标框,标记所述有效目标框的中心点的坐标,将所述最大值在所述响应矩阵中对应的位置作为所述目标对象相对于所述目标框的中心点的位移坐标;

根据所述目标框的中心点的位置,将目标对象所在的位置作为有效目标对象的中心位置,以所述目标对象的中心位置为中心构建第二目标区域;

所述方法还包括:

当所述目标框集合中不存在有效目标框时,按照下式的方法控制所述移动机器人朝着目标消失在视野中的方位转动:

其中,kp1表示比例系数,Vileft表示所述移动机器人第i时刻的左轮速度,Viright表示所述移动机器人第i时刻的右轮速度,(u0tar,v0tar)表示所述目标对象预设的位置坐标,(ulasttar,vlasttar)表示所述目标对象走出视野前一时刻的实际位置坐标。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所,未经中国科学院自动化研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810980715.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top