[发明专利]一种手指点读系统及其操作方法以及采用该系统的装置

权利要求书

1.一种手指点读系统，其特征在于：包括

摄像模块，对绘本及手指进行采样，以及捕捉采样手指落在绘本上的位置；

图像处理模块，对摄像模块采集的图像信息进行储存，并将摄像头捕捉到的手指和绘本的实时图像与储存的图像信息进行比对；

音频处理模块，与采样的绘本进行语音匹配，并在采样手指落在绘本上时进行语音播报；

中央处理模块，处理各个模块之间的通信。

2.根据权利要求1所述的一种手指点读系统，其特征在于：所述的图像处理模块包括

样本储存模块，用于保存采样的绘本图像信息和手指图像信息；

临时储存模块，用于临时储存摄像模块实时拍摄的绘本图像和手指图像；

比较模块，将临时储存模块中摄像模块实时拍摄的手指图像与样本储存模块中储存的手指图像信息进行比较，将临时储存模块中摄像模块实时拍摄的绘本图像与样本储存模块中储存的绘本图像信息进行比较。

3.根据权利要求1或2所述的一种手指点读系统，其特征在于：所述的音频处理模块包括

语音储存模块，用于录制语音并储存；

样本匹配模块，将每一段语音分别与绘本图像信息进行匹配；

播报模块，根据图像处理模块选定的绘本图像，选择对应的语音进行播报。

4.根据权利要求3所述的一种手指点读系统，其特征在于：所述的摄像模块中还设置有扫描模块，用于对新的绘本信息进行采样；语音储存模块，用于录制新的语音，与新的绘本信息进行匹配。

5.一种根据权利要求1-4任一所述的手指点读系统的操作方法，其特征在于：它 的操作步骤如下：

1）摄像模块先对绘本的内容进行采样，并对绘本的图像信息进行保存；

2）音频处理模块将绘本对应的语音进行采样，并对绘本的语音信息进行保存；

3）中央处理模块把绘本的图像信息和绘本的语音信息进行匹配；

4）摄像模块对用户的手指进行采样，并对手指图像信息进行保存；

5）摄像模块对准绘本实时拍摄，利用图像识别技术，当采样的手指落在采样的绘本上时，中央处理模块控制音频处理模块播报采样绘本的语音，实现点读。

6.根据权利要求5所述的一种手指点读系统的操作方法，其特征在于：所述的步骤5）中，图像处理模块利用图像识别技术，对手指点读进行识别，具体步骤如下：

5.1）摄像模块实时拍摄绘本区域，当有手指落在绘本区域时，摄像模块实时拍摄手指照片并存入临时储存模块，比较模块将临时存入的手指照片与样本储存模块中已有的手指图像信息进行比对；

5.2）比对后，如果临时存入的手指照片与样本储存模块中已有的手指图像信息不一致，删除临时存入的手指照片，并进行下一次的比对；

5.3）如果临时存入的手指照片与样本储存模块中已有的手指图像信息一致，则继续比对绘本照片；把临时拍摄的手指落入的绘本照片与样本储存模块中已有的绘本图像信息进行比对，选择绘本图像信息中与临时拍摄的绘本照片相同的那一张，并将该绘本图像信息发送至中央处理模块；

5.4）中央处理模块将绘本图像信息与音频处理模块中的绘本语音信息进行匹配，音频处理模块选择对应的绘本语音信息进行播报，实现点读。

7.根据权利要求5所述的一种手指点读系统的操作方法，其特征在于：当用户需要录入新的绘本信息时，步骤如下：

6）摄像模块对新的绘本进行扫描，采样新的绘本图像信息，并存入样本储存模块中；

7）音频处理模块录制新的绘本语音信息，并存储到语音储存模块中，与新的绘本图像信息相对应；

8）中央处理模块把新的绘本的图像信息与新的绘本语音信息进行匹配；

9）当采样的手指落在新的绘本上时，播报模块就会播报新的绘本语音信息，实现点读。