[发明专利]一种激光雷达辅助摄像机自动调焦聚焦的方法

说明书

一种激光雷达辅助摄像机自动调焦聚焦的方法，首先标定出摄像机的内参数，激光雷达和摄像机的外参数；然后采集初始图像，使用图像识别的方法找到图像中目标的初始区域，计算出云台转动角度，使得摄像机光轴对准目标；在云台转动过程中，根据激光雷达和摄像机联合标定的参数，在激光雷达点云中找到目标区域，确定目标的三维坐标，根据摄像机光学成像模型，计算出焦距值和聚焦值；等到云台转动完成，让摄像机执行计算出来的焦距值和聚焦值，采集图像。此时得到的图像，目标在图像中居中，成像大小合适且成像清晰。计算结果准确，减少人工参与，智能便捷，对图像采集具有很强的实用价值。

技术领域

本发明涉及图像调焦聚焦领域，具体涉及一种激光雷达辅助摄像机自动调焦聚焦的方法。

背景技术

智能巡检机器人在执行巡检任务时，往往使用可以转动的云台搭载摄像机采集现场图像，使用深度学习等图像识别算法进行人脸识别、车辆识别、火情识别等监控任务。图像识别准确的前提是采集到目标清晰的图像，并且目标在图像中有合适的位置和尺寸。根据摄像机的成像模型可知，焦距影响了成像大小；物距、像距(聚焦值)和焦距三者满足透镜成像公式时，就会聚焦清晰。因此需要云台转动合适的角度对准目标，并且调整摄像机合适的聚焦值和像距值，就能采集到合适的图像。现有的监控图像采集方案，有的是人工在后台根据图像采集的情况，不断调整云台转动角度、焦距和聚焦值，但是这样太耗费人力，精度差。有的焦距调整方案是让巡检机器人每次到达指定位置，采用固定的云台转动角度、焦距和聚焦值，但是巡检机器人运动有位置误差，而且这种方式只能在指定位置采集图像，不够灵活。有的聚焦方法使用自动聚焦，采用图像清晰度评价函数估计图像的清晰度，然后调整聚焦值使图像的清晰度达到最大值，但是这种方式的最终结果是整个图像看起来最清晰，目标区域可能模糊。

发明内容

本发明为了克服以上技术的不足，提供了一种目标在图像中居中，成像大小合适且成像清晰的激光雷达辅助摄像机自动调焦聚焦的方法。

本发明克服其技术问题所采用的技术方案是：

一种激光雷达辅助摄像机自动调焦聚焦的方法，其特征在于，包括：

a)在室外巡检机器人上，安装激光雷达和带有摄像机的云台；

b)对摄像机进行标定，得到内参数矩阵其中表示摄像机在平面坐标系中x方向上以像素为单位的焦距长度，表示摄像机在平面坐标系中y方向上以像素为单位的焦距长度，f为摄像机焦距，d_x为摄像机CCD传感器中每个成像单元的长度，d_y为摄像机CCD传感器中每个成像单元的宽度，u₀为光心在图像上的像素横坐标，v₀为光心在图像上的像素纵坐标；

c)对激光雷达和摄像机进行联合标定，得到两者之间的外参数；

d)采集初始图像，使用深度学习的图像识别方法在图像中找到目标所在区域；

e)计算云台转动角度，使摄像机光轴对准目标，使目标所在区域在图像中居中；

f)激光雷达测量目标距离，调整焦距，使目标所在区域在图像中达到设定尺寸；

g)调整聚焦值，使目标在图像中清晰；

h)根据步骤f)中计算得到的焦距值和步骤g)中的聚焦值进行采集图像。

进一步的，步骤b)找那个通过张正友标定法对摄像机进行标定。

进一步的，步骤e)中通过公式计算得到云台水平方向转动角度通过公式计算得到云台垂直方向转动角度式中u为目标所在区域中心点在图像中的横坐标，v为目标所在区域中心点在图像中的纵坐标。

进一步的，步骤f)通过设定目标所在区域尺寸除以当前目标所在区域尺寸计算得到目标区域扩大的倍数，即为聚焦变化的倍数，其中设定目标所在区域尺寸为图像尺寸的4/5。