[发明专利]一种基于人工智能的儿童绘本辅助阅读方法在审
| 申请号: | 201810326362.8 | 申请日: | 2018-04-12 |
| 公开(公告)号: | CN108509136A | 公开(公告)日: | 2018-09-07 |
| 发明(设计)人: | 朱晓明;孙鹏 | 申请(专利权)人: | 山东音为爱智能科技有限公司;孙鹏 |
| 主分类号: | G06F3/0487 | 分类号: | G06F3/0487;G06F3/01;G06F17/30 |
| 代理公司: | 广州恒华智信知识产权代理事务所(普通合伙) 44299 | 代理人: | 姜宗华 |
| 地址: | 265600 山东省*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明公开了一种基于人工智能的儿童绘本辅助阅读方法,包括:逐页拍摄书页图像,制作书页图像模板,保存书页图像特征;通过摄像头拍摄书页图像,提取书页图像的纹理特征,与模板进行匹配,判断书页页码;根据书页页码载入当前页面上的点读资源,点读资源包括绘本中的人物形象及其对应的音频故事和问答资源;检测动态手势的关键图像帧,抛弃模糊不清晰的手势图像帧;通过摄像头拍摄视频帧图像,检测儿童手指指向的点读资源处,则播放对应人物的故事;进入语音问答环节,根据当前页的内容匹配知识库中的问题,主动与儿童会话。上述方法可提供绘本的点读和问答,提高儿童学习兴趣和效率,能够在教学条件不足的场合,辅助儿童自行进行绘本阅读。 | ||
| 搜索关键词: | 书页 摄像头拍摄 人工智能 辅助阅读 图像 页码 知识库 儿童学习兴趣 视频帧图像 儿童手指 辅助儿童 关键图像 教学条件 内容匹配 人物形象 手势图像 图像模板 图像特征 纹理特征 会话 检测 逐页 故事 匹配 手势 语音 载入 指向 播放 抛弃 保存 拍摄 阅读 制作 环节 | ||
【主权项】:
1.一种基于人工智能的儿童绘本辅助阅读方法,其特征在于,所述儿童绘本辅助阅读方法包括以下步骤:步骤1、逐页拍摄书页图像,制作书页图像模板,保存书页图像SIFT特征;步骤2、通过摄像头拍摄书页图像,并且提取书页图像的SIFT特征,与模板进行匹配,判断书页页码;步骤3、根据书页页码载入当前页面上的点读资源,点读资源包括绘本中的人物形象及其对应的音频故事和问答资源;步骤4、检测动态手势的关键图像帧,并抛弃模糊不清晰的手势图像帧;步骤5、通过摄像头拍摄视频帧图像,检测儿童手指位置,当手指位于点读资源处,则播放对应人物的故事,并自动进入语音问答环节;步骤6、自动进入语音问答环节,根据当前页的内容匹配知识库中的问题,并主动与儿童会话。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东音为爱智能科技有限公司;孙鹏,未经山东音为爱智能科技有限公司;孙鹏许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810326362.8/,转载请声明来源钻瓜专利网。





