[发明专利]一种适用于电子助视器的智能阅读操作方法及装置

权利要求书

1.一种适用于电子助视器的智能阅读操作方法，其特征在于：所述方法包括以下步骤：

步骤1：电子助视器的后置摄像头采集文本图像，对文本图像进行预处理，得到定位后的文本图像中的文本行；

步骤2：根据定位后的文本图像中的文本行判断文本图像的阅读逻辑，将定位后的文本图像通过控制模块显示在电子助视器的显示屏上；

步骤3：电子助视器的前置摄像头采集阅读者的人脸图像，获得眼部图像；

步骤4：判断电子助视器是否正在进行文本图像的缩放，如是，重复进行步骤4，否则，进行下一步；

步骤5：对连续帧的眼部图像进行跟踪处理，确定阅读者的视线方向，通过阅读者的视线方向对阅读者的眼部动作进行自左向右阅读、自右向左阅读、自下向上阅读和自上向下阅读的分类，并与定位后的文本图像中的文本行进行匹配，调整文本行基于当前分类的阅读方向的移动速度v，v≥0；持续对连续帧的眼部图像进行跟踪，当连续s秒无法跟踪到眼部图像时，进行下一步，否则继续进行步骤5；2≤s≤10；

步骤6：电子助视器的显示屏关闭。

2.根据权利要求1所述的一种适用于电子助视器的智能阅读操作方法，其特征在于：所述步骤1中，所述预处理包括以下步骤：

步骤1.1：对文本图像进行去畸处理；所述去畸处理包括对图像进行图像倾斜校正和图像书脊处校正；

步骤1.2：对去畸处理后的文本图像进行两级投影定位，得到文本图像的水平方向投影和垂直方向投影；

步骤1.3：利用文本图像的水平方向投影和垂直方向投影，分别获得文本行的坐标、宽度和长度，坐标原点为文本行第一个字的左下坐标，对文本行进行识别和定位。

3.根据权利要求2所述的一种适用于电子助视器的智能阅读操作方法，其特征在于：所述步骤1.2中，两级投影定位包括将文本图像灰度化，得到文本图像的灰度图，将文本图像的灰度图二值化处理，将二值化后的文本图像进行水平方向投影定位和垂直方向投影定位。

4.根据权利要求1所述的一种适用于电子助视器的智能阅读操作方法，其特征在于：所述步骤3中，通过对人脸图像进行边缘提取，获得阅读者的眼睛上下眼睑的边缘位置，最终得到眼部图像。

5.根据权利要求1所述的一种适用于电子助视器的智能阅读操作方法，其特征在于：所述步骤5包括以下步骤：

步骤5.1：对连续帧的眼部图像进行边缘提取，获得每一帧中阅读者的眼睛上下眼睑的边缘位置；

步骤5.2：利用普尔钦斑点法对阅读者处于睁眼状态下时的眼部图像进行分析处理，对眼部图像采用椭圆拟合方法，首先查找瞳孔边界点作为椭圆拟合的样本点，对样本点进行拟合，确定最佳拟合结果，最后把结果椭圆的中心作为瞳孔中心，确定阅读者的视线方向；

步骤5.3：通过阅读者的视线方向对阅读者的眼部动作进行自左向右阅读、自右向左阅读、自下向上阅读和自上向下阅读的分类，并通过视线方向的空间坐标系变换、计算出视线偏移视角ω；

步骤5.4：将阅读者的阅读行为与定位后的文本图像中的文本行进行匹配，调整文本行基于当前分类的阅读方向的移动速度v。