[发明专利]一种互动阅读实现方法在审
| 申请号: | 201911110503.3 | 申请日: | 2019-11-14 |
| 公开(公告)号: | CN110796119A | 公开(公告)日: | 2020-02-14 |
| 发明(设计)人: | 江周平 | 申请(专利权)人: | 深圳一块互动网络技术有限公司 |
| 主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/22;G06K9/32;G06K9/46;G06F16/432 |
| 代理公司: | 33285 绍兴市寅越专利代理事务所(普通合伙) | 代理人: | 胡国平 |
| 地址: | 518000 广东省深圳市南山区粤海街道滨海社*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 图像采集组件 感兴趣区域 封面页 特征库 印刷品 阅读 预制 匹配 局部图像提取 坐标位置信息 采集 多媒体内容 多媒体文件 特征点提取 印刷品内容 局部图像 内容播报 匹配结果 区域图像 实用效果 特征信息 坐标信息 内容页 特征点 处理器 互动 预置 书本 播放 | ||
1.一种互动阅读实现方法,其特征在于,其基于硬件阅读笔实现,所述阅读笔包括笔主体、图像采集组件及光照提示组件,所述笔主体内设有处理器和存储器,所述图像采集组件设于所述笔主体上且位于笔尖位置,所述光照提示组件设于所述笔主体上且位于图像采集组件附近,所述图像采集组件、光照提示组件及存储器分别连接所述处理器。该方法包括以下步骤:
S1、预先针对印刷品的封面页和内容页分别进行特征点提取,从而获得封面页特征库和内容页特征库,并存储到所述存储器;
S2、预先在印刷品的原始页面以某些特定区域对应某些多媒体文件的方式形成对应区域播放多媒体内容库;
S3、使用阅读笔照射印刷品封面页,图像采集组件采集封面页的局部图像,处理器对局部图像进行特征点提取,将提取到特征点与封面页特征库进行匹配,获得印刷品信息;
S4、使用阅读笔照射印刷品内容页的页码位置,图像采集组件采集到页码图像,处理器对页码图像中的数字进行OCR识别,获得页码信息;或者通过阅读笔照射印刷品内容页,图像采集组件采集内容页的局部图像,处理器对局部图像进行特征点提取,将提取到的特征点与内容页特征库进行匹配,所采集的局部图像可以得到明确可信的匹配结果来确定内容页的页码信息。本步骤的目的是缩小感兴趣区域在内容页特征库的搜索范围,提高搜索速度和提高检索的精度。
S5、使用阅读笔照射印刷品内容页上感兴趣的区域,处理器对区域图像进行特征点提取,将提取到特征点与内容页特征库进行匹配,根据匹配结果获得感兴趣区域位置信息,如在没有通过S4缩小搜索范围的前提下能得到明确可信的匹配结果S4步骤可以跳过。
S6、基于S5的位置信息,获取S2中对应位置预置的多媒体文件,并对多媒体文件进行播放。
2.如权利要求1所述的一种互动阅读实现方法,其特征在于,所述阅读笔还可包括感应开关组件,感应开关组件连接到所述处理器。步骤S5中获取感兴趣区域图像的方法是操作者手指操作感应开关组件控制图像采集组件采集到感兴趣区域的区域图像;或者阅读笔照射区在感兴趣区域做短暂停留,以此发出明确的指示进行区域图像采集。
3.如权利要求1所述的一种互动阅读实现方法,其特征在于,所述步骤S3、S4及S5中的图像采集步骤中阅读笔与印刷品之间不产生直接物理接触且阅读笔与印刷品之间的距离可变。
4.如权利要求1所述的一种互动阅读实现方法,其特征在于,所述光照提示组件在使用过程中会使用光照在印刷品上产生人眼可以辨识的指示光点或光斑,对用户选择感兴趣区域起到指示作用。
5.如权利要求1所述的一种互动阅读实现方法,其特征在于,所述步骤S1、S3及S5中的特征点提取通过以下方法实现:
提取尺度不变、旋转不变、亮度变化鲁棒、噪音和视角变化稳定的特征点。
对特征点进行描述,获得特征描述子。
6.如权利要求1所述的一种互动阅读实现方法,其特征在于:所述处理器可以仅为笔主体内置处理器,或通过无线连接的外部具有计算能力的处理器。
7.如权利要求1所述的一种互动阅读实现方法,其特征在于:所述步骤S1中的特征库存储在笔主体内置的存储设备中,或存储在外部存储设备。
8.如权利要求1所述的一种互动阅读实现方法,其特征在于:步骤S2、S6中的所述的多媒体文件存储在笔主体内置的存储设备中,或存储在外部存储设备中。
9.如权利要求1所述的一种互动阅读实现方法,其特征在于:步骤S6中的所述对多媒体文件进行播放利用集成在阅读笔的显示屏或扬声器进行播放,或通过阅读笔具有的WIFI或者蓝牙功能,连接外部智能终端并利用外部智能终端的屏幕、扬声器进行播放,或利用集成在阅读笔上的投影装置进行播放。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳一块互动网络技术有限公司,未经深圳一块互动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911110503.3/1.html,转载请声明来源钻瓜专利网。





