[发明专利]一种基于图像识别的点读方法及电子设备

说明书

本发明实施例公开一种基于图像识别的点读方法及电子设备，该方法包括：在电子设备处于点读模式时，判断拍摄到的针对学习页面的页面图像中是否存在干扰区域，该干扰区域为学习页面中非印刷体内容所处的区域；若是，去除页面图像中的干扰区域，得到目标图像；当检测到用户在学习页面上的点击操作时，依据目标图像，确定该点击操作对应的待报读内容；对待报读内容执行报读操作。通过实施本发明实施例，能够提升用户的点读体验感。

技术领域

本发明涉及电子设备技术领域，具体涉及一种基于图像识别的点读方法及电子设备。

背景技术

学生利用家教设备对纸质书本面上不认识的字、词以及句进行点读时，家教设备往往需要对学生于纸质书本面的点击区域进行采集，得到书本图像，并基于该书本图像，实现对学生不认识的字、词以及句的识别以及报读。实践中发现，家教设备一般通过以图搜图的方式识别书本图像，但若采集到的书本图像中存在手写笔记或者涂鸦等干扰因素，家教设备通常很难从图库中确定该书本图像匹配的图像，致使对学生不认识的字、词以及句的识别效率较低，学生的点读体验感不佳。

发明内容

本发明实施例公开一种基于图像识别的点读方法及电子设备，能够提升用户的点读体验感。

本发明实施例第一方面公开一种基于图像识别的点读方法，包括：

在电子设备处于点读模式时，判断拍摄到的针对学习页面的页面图像中是否存在干扰区域；其中，所述干扰区域为所述学习页面中非印刷体内容所处的区域；

若是，去除所述页面图像中的所述干扰区域，得到目标图像；

当检测到用户在所述学习页面上的点击操作时，依据所述目标图像，确定所述点击操作对应的待报读内容；

对所述待报读内容执行报读操作。

作为一种可选的实施方式，在本发明实施例第一方面中，所述当检测到用户在所述学习页面上的点击操作时，依据所述目标图像，确定所述点击操作对应的待报读内容，包括：

当检测到用户在所述学习页面上的点击操作时，获取所述点击操作的坐标信息；

获取所述目标图像对应的学习内容信息；其中，所述学习内容信息至少包括所述目标图像对应的学习内容和所述学习内容的坐标信息；

依据所述点击操作的坐标信息，从所述学习内容信息中确定所述点击操作对应的待报读内容。

作为一种可选的实施方式，在本发明实施例第一方面中，所述当检测到用户在所述学习页面上的点击操作时，依据所述目标图像，确定所述点击操作对应的待报读内容之后，所述方法还包括：

获取用户信息，并获取所述用户信息匹配的知识图谱；

依据所述知识图谱，获取所述待报读内容的关联学习内容；

所述对所述待报读内容执行报读操作之后，所述方法还包括：

按照预设方式，输出所述关联学习内容。

作为一种可选的实施方式，在本发明实施例第一方面中，所述按照预设方式，输出所述关联学习内容之后，所述方法还包括：

判断所述待报读内容是否存在于知识巩固库中；

当所述待报读内容未存在于所述知识巩固库时，将所述待报读内容和所述关联学习内容关联存储至所述知识巩固库。

作为一种可选的实施方式，在本发明实施例第一方面中，所述将所述待报读内容和所述关联学习内容关联存储至所述知识巩固库之后，所述方法还包括：

获取用户的历史学习记录；

依据所述历史学习记录，确定所述待报读内容的巩固时段；