[发明专利]基于图像识别追踪技术的点读指点件点击判断方法

说明书

本发明公开了一种基于图像识别追踪技术的点读指点件点击判断方法，包括如下步骤：1)将点读系统的摄像装置固定于出版物上方；2)摄像装置实时拍摄点读指点件与出版物页面，点读系统实时计算点读指点件的识别区域与出版物页面在拍摄图像中的实时面积比z；3)设置点读指点件接近出版物到刚好触发点击的位置时，点读指点件的识别区域与出版物页面在拍摄图像中的面积之比为z₁；4)若实时面积比z＞z₁，则点读系统判定当前点读指点件处于未点击状态；若z≤z₁，则点读系统判定当前点读指点件处于点击状态。该方法通过点读指点件与页面的面积比例变化来判断高度，识别准确度高，无需识别深度信息，硬件成本较低。

技术领域

本发明涉及一种点读指点件点击判断方法，特别是指一种基于图像识别追踪技术的点读指点件点击判断方法。

背景技术

点读笔是采用光学编码识别技术和数码语音技术开发而成的新一代智能阅读和学习工具，能同时实现点读、复读、跟读、录音、娱乐等诸多功能。其技术原理是先将图书上的内容通过OID进行编码，并用特殊的印刷技术将编码印刷到特制图书上，然后用户用点读笔扫描图书编码就可以进行识别并播放相应语音。

申请号为201410398737.3的中国专利公开了一种点读系统，该系统包括摄像装置，位于台灯正上方，用于对台灯下的书本及用户在书本上的手势进行实时扫描；点读装置，用于识别书页距离摄像头的深度，并根据用户在书本上的手势和手指距离书本的深度信息确定点击事件；将点击事件预定区域内的文字图像，进行图像到文字的识别转换；将识别转换后的文字进行语音合成，并输出到扬声器装置中；扬声器装置，用于进行语音播放。其中，点读装置设置有手势识别和定位模块，该模块根据摄像装置对台灯下书本的扫描，动态生成平面坐标图和平面坐标图每一点上书本与摄像装置之间的深度数据；根据每一点的深度数据设定该点上点击事件产生的阈值范围；根据摄像装置对用户在书本上手势的扫描，确定用户手指与书本之间的距离，将该距离与用户手指所在位置上的阈值范围相比较，如果在阈值范围内，则确定点击事件发生；根据点击事件所在平面坐标图的位置确定该点击事件所在的平面坐标位置。

上述通过识别手指的深度信息来判断点击事件的方法对摄像装置的要求较高；若采用单目摄像头，深度识别的误差很大，识别准确度不理想，难以满足点读要求；若采用双目摄像头，虽然对深度的识别准确度较高，但硬件成本也会增加。

发明内容

本发明的目的在于提供一种基于图像识别追踪技术的点读指点件点击判断方法，该方法可采用常规单目摄像装置，并且无需识别深度信息。

为实现上述目的，本发明所设计的基于图像识别追踪技术的点读指点件点击判断方法，包括如下步骤：

1)将点读系统的摄像装置固定于待点读的出版物上方；

2)在点读过程中，摄像装置实时拍摄点读指点件与出版物页面，点读系统实时计算点读指点件的识别区域与出版物页面在拍摄图像中的面积之比，记为实时面积比z；

3)设置点读指点件接近出版物到刚好触发点击的位置时，点读指点件识别区域与出版物页面在拍摄图像中的面积之比为临界面积比z₁；

4)若实时面积比z＞z₁，则点读系统判定当前点读指点件处于未点击状态；若z≤z₁，则点读系统判定当前点读指点件处于点击状态。

可选地，所述出版物页面在拍摄图像中的面积采用出版物封面或封底在拍摄图像中的面积进行计算。即在计算实时面积比z时，只需计算封面(或封底)在拍摄图像中的面积，无需再计算其他页面在拍摄图像中的实时面积，从而简化了计算。该方案的缺点是受出版物和摄像装置的摆放位置影响较大，为提高准确度，最好在每次点读前都拍摄封面(或封底)与点读指点件在同一平面上的图像并获得二者的大小比例，同时在阅读过程中尽量避免大幅度移动书本。