[发明专利]一种基于多模型融合的船舶水尺读数自动识别方法

说明书

本发明公开了一种基于多模型融合的船舶水尺读数自动识别方法，包括以下步骤：（1）对原始图像进行水尺区域检测；（2）从原始图像中抠取水尺局部图像；（3）对水尺局部图像进行图像处理；（4）矫正原始图像得到矫正后的原始图像；（5）抠取矫正后的水尺局部图像，刻度字符检测获得刻度字符检测结果；（6）对于刻度字符检测结果进行矫正，得到水尺刻度读数；（7）建立刻度读数模型；（8）将矫正后的原始图像进行图像分割，获得吃水线位置信息；（9）将吃水线位置信息输入刻度读数模型计算得到水尺吃水线的刻度读数；本发明能够有效解决当前船舶水尺自动读数问题，极大的提高了工作效率；且能够复用至其他有关水尺读数的应用场景中。

技术领域

本发明涉及一种基于多模型融合的船舶水尺读数自动识别方法，属于船舶水尺刻度检测领域。

背景技术

随着船舶运输业的发展，船舶六面水尺吃水数值的读取成为水尺计重计量准确性的最关键因素，原有的人工目测读数方法存在误差大、过于主观等问题；另外观测环境的不便利，增加了人工目测的成本和工作量，也增加了人员安全的风险；除了传统人工目测方法，目前已有多种方案尝试解决该问题；基于物理传感器的方法有：通过在安装双压力传感器来检测船舷吃水深度；或者通过超声波传感器发射超声波，根据超声波从水面反射回甲板所需的时间来计算吃水线的位置信息；或者直接利用激光测距传感器直接获得水面位置；上述方法都有安装困难、施工困难、精度易受环境影响等问题；因此，基于图像视频算法的自动读取水尺读数的方法及应用很有必要。

图像识别方法包括三个主要模块：吃水线定位、字符识别、读数数值预估；基于传统图像识别的方法：输入水尺图像，通过图像处理的边缘检测水面线位置，利用图像二值化定位刻度数字位置，再通过模板匹配等方法进行识别，最后拟合预估水尺吃水刻度值；此类方法泛化性、鲁棒性较差，局限于部分水尺场景，易受船体锈迹、水际线等因素影响，水面线检测定位和数字识别精度都无法得到保证；近年来也有基于深度学习的相关方法被提出，利用训练深度学习网络来实现刻度字符识别和定位，利用图像分割网络来定位吃水线位置信息，二者结合利用最小二乘法等方法预估吃水线；此类方法目前存在的问题是，对整张图像进行字符定位和识别误检的误识别率较高，且字符定位的包围框不够贴合，引起较大的读数误差；另外不能很好地解决水尺在图像中有倾斜、旋转角度等情况；另外由于船体本身存在非平面内的旋转倾斜角度，刻度字符的数值和其间隔呈现非线性状态，易增加读数误差。

发明内容

本发明的目的是对于现有图像识别类方法存在的问题和缺点进行针对性的优化和解决，因此本发明提供了一种基于多模型融合的船舶水尺读数自动识别方法，具有灵活度高、精确度高、泛化性鲁棒性高等特点；能够有效解决当前船舶水尺自动读数问题，极大的提高了工作效率；且能够复用至其他有关水尺读数的应用场景中。

为了实现上述目标，本发明采用如下的技术方案：

一种基于多模型融合的船舶水尺读数自动识别方法，包括以下步骤：

（1）对采集的原始图像进行水尺区域检测；

（2）从原始图像中抠取水尺局部图像；

（3）对水尺局部图像进行图像处理，获得其变化的旋转平移矩阵M；

（4）原始图像经过步骤（3）获得的旋转平移矩阵M矫正，得到矫正后的原始图像；

（5）根据矫正后的原始图像旋转中心位置信息和长宽数值抠取矫正后的水尺局部图像，对矫正后的水尺局部图像进行刻度字符检测，获得刻度字符检测结果，刻度字符检测结果包括刻度字符的读数信息和边界包围框；

（6）对于刻度字符检测结果进行矫正，得到水尺刻度读数；

（7）根据步骤（6）得到的水尺刻度读数中每个刻度读数和其对应的位置信息进行多项式拟合，获得水尺刻度读数与纵轴位置的非线性关系式，建立刻度读数模型；