[发明专利]一种空地协同车辆定位定向方法在审
申请号: | 202111089102.1 | 申请日: | 2021-09-16 |
公开(公告)号: | CN113971697A | 公开(公告)日: | 2022-01-25 |
发明(设计)人: | 卢瑞涛;范继伟;杨小冈;席建祥;谢学立;朱正杰;王思宇 | 申请(专利权)人: | 中国人民解放军火箭军工程大学 |
主分类号: | G06T7/80 | 分类号: | G06T7/80;G06T7/73;G06T7/13;G06T7/246;G06T5/00;G06V10/762;G06V10/764;G06V10/77;G06V10/774;G06K9/62 |
代理公司: | 重庆信必达知识产权代理有限公司 50286 | 代理人: | 刘竹 |
地址: | 710025 陕西*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 空地 协同 车辆 定位 定向 方法 | ||
1.一种空地协同车辆定位定向方法,其特征在于:包括如下步骤:
S1、构建图像采集系统:采用无人机挂载工业相机来构建非重叠视场相机系统,求解相机之间的坐标变换,获取多相机的内部参数和外部参数,用于畸变图像的校正以及局部场景信息的构成;
S2、标志物检测与识别:基于结构森林和PCANet的标志物检测对相机系统内获取的内部参数和外部参数进行分类识别,以获取标志物的位置信息;
S3、车辆的定位定向:根据时空一致性的视觉推算定位算法,并结合S2中检测到的标志物位置信息,对车辆自身的方位进行估计,同时,采用状态滤波,实时估计车辆的位置和状态信息。
2.根据权利要求1所述的一种空地协同车辆定位定向方法,其特征在于:S1中外部参数的获取方法采用如下步骤:
S101、将两个子靶标(即第一子靶标和第二子靶标)固连形成固连靶标,确保两个子靶标分别放置于第一相机和第二相机的视场中,再通过大视场相机获取不同位置时固连靶标的图像序列,根据PnP原理,可以求解固连靶标到大视场相机的转换矩阵Tt1,c和Tt2,c,并且以相机坐标系为中介,根据式为:
上式中,K为内参矩阵,Hi为第i个靶标到图像平面的映射关系,和为外部参数;通过摄影测量法获取子靶标之间的转换矩阵Tt2,t1,作为求解多相机系统之间转换矩阵参数的关联条件;
S102、对于非重叠视场相机系统,令第一相机采集视场中第一子靶标的图像、第二相机采集视场中第二子靶标的图像,提取图像中的角点特征,得到第一子靶标到第一相机的转换矩阵Tt1,c1和第二子靶标到第二相机的转换矩阵Tt2,c2,并结合S101中得到的参数关联条件Tt2,t1,根据式为:
上式中,Tt2,t1为通过摄影测量法求得的固连靶标之间的转换矩阵,Tc2,c1为第二相机到第一相机的转换矩阵;
S103、结合非重叠视场相机系统标定的空间约束条件,构建重投影目标优化函数,考虑到相机的分辨率、畸变、成像角以及标定平面非共面带来的误差,实际计算求解中为了降低z轴分量对标定结果的影响,通过在不同位置k获取靶标图像,得到靶标之间的转换矩阵Tt2,t1(k),取平移分量在z轴偏差最小时的Tt2,t1(k)作为靶标间的转换矩阵;
相机间的转换矩阵Rc2,c1和平移向量tc2,c1为待优化的固定值,根据实时解算的矩阵Rc2,c1和tc2,c1,在不同位置时刻,第二相机到第一相机的位置关系为:
则可以得到位置约束条件:
上式中,m和n分别为任意两个不同位置,[m-n]为根据图像特征点求得的第一相机到第二相机的外部参数差异,归一化便于计算;
不同相机在相同位置时的重投影误差不同,在不考虑镜头畸变时,根据径向一致性约束条件可知:
上式中,sxr1/Ty,sxr2/Ty,sxr3/Ty,sxTx/Ty,r4/Ty,r5/Ty,r6/Ty可以通过最小二乘法得到,sx,r1,L,r9,Tx,Ty,Tz可以通过旋转矩阵的正交性得到,则靶标上的坐标点可以表示为:
从上式中可以看出,靶标的坐标点与相机本身的焦距及畸变参数有关,同一目标点,经过多相机坐标系的转换后,其坐标的重投影误差是不相同的;
令靶标在位置i时,特征点j在第一子靶标和第二子靶标上的坐标为和为点在第一子靶标坐标系中的齐次坐标,为点在第二子靶标坐标系中的齐次坐标,和分别为点在无畸变图像和重投影图像的齐次坐标,则根据透视投影模型可得:
上式中,K1为第一相机的内部参数矩阵,K2为第二相机的内部参数矩阵;
则在相机系统中,靶标间的重投影误差可以表示为:
上式中,n1和n2分别为靶标中的特征点数量;
结合上述公式建立的约束条件,将靶标间的共面约束、相机与靶标的位置约束以及多相机间的重投影约束,采用非线性优化的方法,通过非重叠视场相机系统同时采集k个不同位置时的标定图像,优化相机之间的转换矩阵,依据最大似然准则构建目标优化函数,求解Tt2,t1和Tc2,c1的最优解:
上式中,k为靶标在不同位置拍摄的靶标图像,n1和n2分别为靶标中特征点的数量;利用Levenberg-Marquardt算法,对相机之间转换矩阵的12个参数进行优化,求解优化后非重叠相机之间的转换矩阵Tc2,c1。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民解放军火箭军工程大学,未经中国人民解放军火箭军工程大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111089102.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:数据查询系统的攻击防御方法、设备及存储介质
- 下一篇:一种放线架