[发明专利]绘本识别方法、装置、家教机及存储介质在审
申请号: | 202110742662.6 | 申请日: | 2021-06-30 |
公开(公告)号: | CN113486767A | 公开(公告)日: | 2021-10-08 |
发明(设计)人: | 张明云 | 申请(专利权)人: | 东莞市小精灵教育软件有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/20 |
代理公司: | 深圳中细软知识产权代理有限公司 44528 | 代理人: | 孙凯乐 |
地址: | 523000 广东省东莞市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 识别 方法 装置 家教 存储 介质 | ||
1.一种绘本识别方法,其特征在于,所述方法包括:
获取绘本的标准图库,所述标准图库中包含多个标准绘本页及每个所述标准绘本页对应的多个标准区块,每个所述标准区块均标识有不同的标准坐标,其中,所述标准图块是通过将每个标准绘本页按照预设的划分规则进行划分得到的;
当检测到用户对绘本的点击操作时,采集拍摄得到的当前绘本页,并获取当前绘本页的拍摄像素;
在所述标准图库中进行检索,确定所述当前绘本页对应的标准绘本页作为目标绘本页,并获取所述目标绘本页的标准像素;
根据所述点击操作对应的点击位置,利用指尖定位方法确定点击区域;
基于所述拍摄像素和所述标准像素,将所述点击区域转换为与所述标准坐标对应的坐标系一致的目标区域;
从所述目标绘本页对应的多个标准区块的各个所述标准坐标中查找包含有目标区域的标准区块确定为目标区块;
基于所述目标区块确定绘本识别结果。
2.根据权利要求1所述的绘本识别方法,其特征在于,在所述基于所述目标区块确定绘本识别结果之前,还包括:
基于所述点击区域,从所述当前绘本页截取第一绘本页;
分别提取所述第一绘本页的第一文字信息和所述目标区块的第二文字信息;
判断所述第一文字信息与所述第二文字信息是否匹配;
若不匹配,判定所述识别结果为所述点击区域为空白区域。
3.根据权利要求1所述的绘本识别方法,其特征在于,所述基于所述目标区块确定绘本识别结果,包括:
基于所述目标区域,从所述目标区块截取第二绘本页;
对所述第二绘本页进行识别,得到所述绘本识别结果。
4.根据权利要求1所述的绘本识别方法,其特征在于,所述基于所述拍摄像素和所述标准像素,将所述点击区域转换为与所述标准坐标对应的坐标系一致的目标区域,包括:
基于所述拍摄像素和所述标准像素计算映射变换矩阵;
将所述点击区域按照所述映射变换矩阵进行坐标变换处理,得到所述目标区域。
5.根据权利要求1所述的绘本识别方法,其特征在于,所述方法还包括:
分别对所述标准图库中的各个标准区块进行识别和语义分析,生成绘本释义信息映射表,每一标准区块对应一条绘本释义信息。
6.根据权利要求5所述的绘本识别方法,其特征在于,所述方法还包括:
从所述绘本释义信息映射表中获取所述目标区块对应的目标绘本释义信息;
将所述目标绘本释义信息进行展示。
7.根据权利要求1所述的绘本识别方法,其特征在于,所述根据所述点击操作对应的点击位置,利用指尖定位方法确定点击区域,包括:
获取包含有手指进行点击操作的点击图像;
对所述点击图像进行边缘检测,得到手指轮廓特征;
基于所述轮廓特征确定所述点击区域。
8.一种绘本识别装置,其特征在于,所述绘本识别装置包括:
获取模块,用于获取绘本的标准图库,所述标准图库中包含多个标准绘本页及每个所述标准绘本页对应的多个标准区块,每个所述标准区块均标识有不同的标准坐标,其中,所述标准图块是通过将每个标准绘本页按照预设的划分规则进行划分得到的;
采集模块,用于当检测到用户对绘本的点击操作时,采集拍摄得到的当前绘本页,并获取当前绘本页的拍摄像素;
检索模块,用于在所述标准图库中进行检索,确定所述当前绘本页对应的标准绘本页作为目标绘本页,并获取所述目标绘本页的标准像素;
定位模块,用于根据所述点击操作对应的点击位置,利用指尖定位方法确定点击区域;
转换模块,用于基于所述拍摄像素和所述标准像素,将所述点击区域转换为与所述标准坐标对应的坐标系一致的目标区域;
查找模块,用于从所述目标绘本页对应的多个标准区块的各个所述标准坐标中查找包含有目标区域的标准区块确定为目标区块;
识别模块,用于基于所述目标区块确定绘本识别结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东莞市小精灵教育软件有限公司,未经东莞市小精灵教育软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110742662.6/1.html,转载请声明来源钻瓜专利网。