[发明专利]一种新型多角度双目摄像头的图像融合算法和识别应用

说明书

本发明涉及图像技术领域，具体是一种新型多角度双目摄像头的图像融合算法和识别应用，包括以下步骤：S1、树莓派接收到语音输入模块的语音信号，根据语音输入模块输出的字符串判定开始执行算法；S2、树莓派发送PWM值控制多角度双目摄像头进行拍摄；S3、对拍摄到的图片进行拼接成一幅大尺幅图像；S4、对合成后的图像进行植物识别与计数，本发明创新性地采用了双轴云台搭载双摄像头的方式，以此来模拟人类正常生活中使用眼睛观察物体的情形，使机器视觉与智能眼镜相结合，开创性地发明了多角度图像融合与识别算法，并对融合后的图像中识别出来的物体进行计数，有效的解决了在绿色基础设施统计过程中的人工识别难，计数难的痛点。

技术领域

本发明涉及图像技术领域，具体是一种新型多角度双目摄像头的图像融合算法和识别应用。

背景技术

摄像头拍摄景物通过镜头，将生成的光学图像投射到传感器上，然后光学图像被转换成电信号，电信号再经过模数转换变为数字信号，数字信号经过DSP加工处理，再被送到电脑中进行处理，最终转换成手机屏幕上能够看到的图像。

当前智能眼睛（AR/VR/XR/MR/语音眼镜）等设备的摄像头主要以单目且固定角度为主；但是在实际情况中，人在观察某个环境时，可以通过眼球转动增大实际可视角，同时，人有左右两个眼睛，单目摄像头在某一侧单一地观察时，可视角远小于真实情况下人类的可视角，这在一些需要依靠智能眼镜或其他设备来模拟人类真实视觉环境时会造成识别偏差，影响最终的识别结果。同时当前的模拟人类视觉的终端设备存在可视角低、用户操作不方便等问题。当前增加可视角的方法主要集中在增加单个摄像头的可视角上，如采用鱼眼摄像头将可视角增加到90度以上，但该摄像头会将所拍摄到的画面从中轴位置进行畸变，从而达到增加可视角的效果，但是畸变的图像对机器视觉、图像识别结果会造成不利的影响。另外，当前绿色基础设施发展迅速，但在政府与企业进行规划时需要对当前的绿化环境的部分绿植进行种类识别与数量监测，当前的主流方法是依靠人眼进行统计或翻查历史施工记录，此举耗时耗力还会因为施工图的丢失造成影响。

发明内容

本发明的目的在于提供一种新型多角度双目摄像头的图像融合算法和识别应用，以解决上述背景技术中提出的问题。

本发明的技术方案是：一种新型多角度双目摄像头的图像融合算法和识别应用，包括以下步骤：

S1、树莓派接收到语音输入模块的语音信号，根据语音输入模块输出的字符串判定开始执行算法；

S2、树莓派发送PWM值控制多角度双目摄像头进行拍摄：利用多角度双目摄像头摄像头对上左、上中、上右、中左、中中、中右、下左、下中、下右九个方向分别进行照相；

S3、多角度双目摄像头摄像头共拍摄到十八张照片，且多角度双目摄像头摄像头复位到初始状态，接着对拍摄到的十八张图片进行拼接成一幅大尺幅图像；

S4、对合成后的图像进行植物识别与计数。

优选的，所述多角度双目摄像头包括镜架、两个可旋转的云台和两个摄像头，两个所述云台分别固定连接于镜架左右两侧的前端位置，两个所述摄像头分别固定连接于两个云台上，两个所述摄像头均通过信号线与主控电路板连接，所述镜架右侧端固定连接有电源。

优选的，所述云台为双轴云台，X轴以中轴线为0度，模拟平视状态，左右两侧分别可以进行75度逆时针和顺时针旋转；Y轴固定在x轴上，以Y轴中轴线为0度，模拟平视状态，上下两侧分别可以进行75度顺时针和逆时针旋转，所述摄像头固定在Y轴上。

优选的，所述云台采用舵机进行控制，所述主控电路板使用树莓派zero，所述主控电路板连接有语音模块，所述语音模块包括语音识别和语音输出，所述语音识别采用speed的respeaker，所述语音输出采用耳机接口。

优选的，S3中，所述对拍摄到的十八张图片进行拼接成一幅大尺幅图像的具体步骤包括：

S31、检测并提取图像的特征和关键点、匹配两个图像的描述符；