[发明专利]一种基于鱼眼镜头的单目测距方法在审

专利信息
申请号: 201911090732.3 申请日: 2019-11-09
公开(公告)号: CN110889829A 公开(公告)日: 2020-03-17
发明(设计)人: 左伟;李晓丽;柯天成;宋奇奇 申请(专利权)人: 东华大学
主分类号: G06T7/00 分类号: G06T7/00;G06T5/00;G06N3/04
代理公司: 上海申汇专利代理有限公司 31001 代理人: 徐俊
地址: 201600 上*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 眼镜 目测 方法
【权利要求书】:

1.一种基于鱼眼镜头的单目测距方法,其特征在于,包括下述步骤:

步骤一、使用鱼眼镜头拍摄照片,得到畸变图像;

步骤二、将畸变图像送入训练好的神经网络,得到目标物体的外界框坐标,并根据得到的框图坐标,在图像中将目标物体框出;

步骤三、对框出的图像区域进行图像处理,得到目标物体的轮廓图;

步骤四、对轮廓图使用特征点检测算法,得到目标特征点;

步骤五、根据畸变图像校正公式,得到校正后的特征点坐标;

步骤六、根据已知的与图像中特征点对应的现实中物体特征点间的距离,使用坐标转换公式在图像与世界坐标系间建立数学等式,求解得到鱼眼相机距离目标物体距离。

2.如权利要求1所述的一种基于鱼眼镜头的单目测距方法,其特征在于,在所述步骤一中,鱼眼镜头视角为180度,目标物体中心与鱼眼镜头光心在同一水平面。

3.如权利要求1所述的一种基于鱼眼镜头的单目测距方法,其特征在于,在所述步骤二中,对畸变图像使用的算法是基于深度学习的目标检测算法,该算法包括以下部分:

采用MobileNet V2中的分通道卷积方法,提取训练数据集中畸变图像的高级特征;

对不同卷积层筛选出的特征使用FPN进行特征融合,将融合后的特征送入分类子网络和定位子网络,得到分类和定位误差;

采用损失优化函数进行深度神经网络学习训练,得到训练后的优化模型,其损失函数为:

其中,x为输入图像,θ为模型参数,m为预设框数量,α和β是平衡定位与分类损失的权重,是当预设框为正预设框时值为1,否则为0,li和pi分别为位置偏移和标签;Lreg表示位置损失函数,Lcls表示分类损失函数。

4.如权利要求1所述的一种基于鱼眼镜头的单目测距方法,其特征在于,在所述步骤三中,对图像进行轮廓识别包含以下步骤:

读取待检测图像,对图像进行灰度处理,即

设置阈值对灰度图进行二值化处理;

使用Canny算子对灰度图检测轮廓,得到轮廓点后存入数组,对轮廓采用轮廓跟踪,得到连续的轮廓点集P(i);

使用OpenCV将轮廓绘制于原图大小的黑白图中。

5.如权利要求1所述的一种基于鱼眼镜头的单目测距方法,其特征在于,在所述步骤四中,基于轮廓的特征点检测方法是通过间接法来求解特征点,其步骤如下:

首先,将目标物体轮廓点集P(i)分解到X、Y坐标轴,得到两条一维离散曲线X(i)和Y(i),然后通过插值法求解曲线X(i)和Y(i)各点曲率:

其中上为插值步长;得到曲率后在小尺度下利用多尺度提高检测精度和算法对噪声的鲁棒性,同时使用自适应阈值得到目标物体特征点。

6.如权利要求1所述的一种基于鱼眼镜头的单目测距方法,其特征在于,在所述步骤五中,畸变图像的校正采用由张正友标定法得到的畸变系数矩阵K=[K1,K2,...,K5];

张正友标定法:使用一张打印好的棋盘格(黑白间距已知),并贴在一个平板上,然后针对棋盘格拍摄10-20张图片,之后利用Harris特征在图片中检测特征点,最后通过解析解估算方法计算出鱼眼镜头的内部参数以及畸变系数。

7.如权利要求1所述的一种基于鱼眼镜头的单目测距方法,其特征在于,在所述步骤六中,像素坐标系与世界坐标系间的转换表达式为:

其中,(μ,v)为像素坐标系的坐标,dx、dy分别为图像单位像素在水平和垂直方向的大小,(cx,cy)为图像中心点,f为鱼眼镜头焦距,R为旋转矩阵,t为转移向量,为世界坐标系的坐标。

8.如权利要求2所述的一种基于鱼眼镜头的单目测距方法,其特征在于,所述的目标物体为立方体。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东华大学,未经东华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201911090732.3/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top