[发明专利]非量测相机交叉耦合误差补偿与影像匹配纠正方法及系统

说明书

本发明提供了一种非量测相机交叉耦合误差补偿与影像匹配纠正方法及系统，在相机变焦情况下，通过拟合的焦距倍率和像素焦距拟合的一元一次方程获得像素焦距，通过分辨率获得像素中心，以此构建出变焦下相机的内参矩阵。在相机姿态变动下，已知相机姿态旋转的角度，通过相机旋转角度获取的变换矩阵和基准下的旋转矩阵获得新姿态下的旋转矩阵，通过平移向量推导公式获取新姿态下的平移向量。使得非量测相机在变焦，旋转的过程中，能够实时的得到相机的内外参数，从而使物方世界坐标系的点可以实时的匹配、映射到摄像头影像上。并且，本发明改善了由于相机旋转过程中存在的交叉耦合现象带来的物方空间与像方空间的匹配误差。

技术领域

本发明涉及相机摄影测量领域，尤其涉及一种非量测相机交叉耦合误差补偿与影像匹配纠正方法及系统。

背景技术

随着社会经济和科学技术的发展，近年来，人们对安全技术防范的要求越来越高。上个世纪八十年代末至今，随着各种新型安保观念的引入，数字视频监控系统在社会各行业、各部门的安全防范领域得到了广泛应用，视频监控技术在公共安全领域发挥了重要作用。

随着摄像机技术的发展，视频监控系统所采用的监控摄像头由模拟摄像头向数字摄像头转变，现在的视频监控系统中基本都采用高清晰度的数字摄像头。目前的视频监控系统多采用一个固定的摄像头对某个场景进行监控。对于范围较大的区域，如机场、海关、广场、火车站等，单个摄像头往往无法覆盖整个区域(杨建国.论视频监控的犯罪预防功能及犯罪侦查价值[J].犯罪研究,2011,01:64-74.)。在实际应用中，可以采用两种方法解决大范围的视频监控问题：一种方法是利用多个固定的摄像头覆盖整个监控区域；另一种方法是利用一个安装在固定云台上的、可以按照控制指令左右上下转动的PTZ相机来监控整个区域，该PTZ相机在监控区域内按照控制指令转动、重复扫描。与第一种方法中的固定摄像头相比，PTZ相机可以按照控制指令灵活转动，可以覆盖更大的区域，是当前视频监控系统中广泛采用的主流摄像头。

PTZ（Pan/Tilt/Zoom）相机是集高分分辨率摄像头、变速云台和光学变焦镜头等部件于一体的监控设备，因为其高度的灵活性，广泛应用于现代工业的各个行业。随着测量技术的发展，传统固定参数的静态相机虽然可以通过固定的内方位元素、外方位元素（相机的旋转矩阵、平移矩阵）完成影像匹配，但不足以满足某些环境下的摄影测量工作。而PTZ相机由于其本身的灵活性，更加适合运用在一些摄影测量领域。物方空间和像方空间的影像匹配就是这些摄影测量领域的常见问题。

PTZ相机由于其变焦和变速云台，运用影像匹配需要实时的获取相机的内方位元素、外方位元素。一台专门为测量而设计的量测PTZ相机，虽然可以做到这一点，但其制作工艺太过复杂，价格也过于昂贵。而非量测PTZ相机既没有实时的相机内方位元素、外方位元素，还会有相机本身缺陷导致的转动过程中的交叉耦合误差。本申请的描述中，相机的内方位元素也称为相机的内参或内参矩阵；相机的外方位元素也称为相机的外参或外参矩阵。

目前基于SIFT匹配的云台相机姿态变化检测（林冰仙;石林;徐长禄;周良辰，南京师范大学，2016.12.28）这种求PTZ外方位元素会有当PTZ相机两帧画面的匹配点过少时，相机的外方位元素求解会极大的失真。在仅用两幅场景图像标定PTZ相机方法（王睿、杨娇茹、冯遂舟，北京航空航天大学，2017.03.22）虽然可以获得PTZ相机的内参，但是在影像实时匹配中，没办法用一帧图像获取内参，达不到实时的要求。同时上述求内外方位元素的方式都是基于寻找图像特征点的方式，而在实际工作中，在光照条件的影像，可能图像特征点匹配并没有很好的效果，难以找到两张图像的特征点。即PTZ相机获取内外方位元素的方式在影像匹配领域，需要其他方式解决。