[发明专利]基于增强现实的电子绘本系统、显示方法、装置和介质

说明书

本发明公开了一种基于增强现实的电子绘本系统、显示方法、装置和介质，所述电子绘本系统包括界面显示模块、拍摄模块、模型生成模块、模型展示模块和互动模块。所述电子绘本系统可以生成增强现实的3D动画，具有逼真的视觉体验；通过可相互跳转的不同层级的交互界面，实现简约高效的操作方式，使得用户可以通过观察各交互界面所显示的内容，获知当前的操作深度，从而方便地进行3D动画的选择播放等操作；通过采集互动手势对3D动画模型进行旋转、放缩、锁定和解锁等调整，使得用户可以通过观看3D动画模型来单向获取视觉体验之外，还可以主动对3D动画模型进行操作，提高交互体验。本发明广泛应用于多媒体技术领域。

技术领域

本发明涉及多媒体技术领域，尤其是一种基于增强现实的电子绘本系统、显示方法、装置和介质。

背景技术

绘本是儿童及其他群体喜爱的读物之一。传统的绘本以纸质书籍为媒介，通过印刷的图片和文字等载体呈现内容，其表现形式比较单调，难以保持对儿童的吸引力。随着电子技术的发展，出现了基于增强现实的电子绘本，其以增强现实的形式呈现绘本中的故事内容，具有表现形式丰富、内容易动态更新等优点，更容易吸引儿童的注意力，取得比纸质绘本更好的阅读效果。

现有的电子绘本技术包括：

申请号为CN 2016105448583的专利文件所公开的一种基于增强现实的儿童涂色系统及其显示方法，其技术方案为：通过系统的摄像机获取真实环境，并调用Vuforia AR单元识别非涂色区域并加载相应的多媒体资源，同时调用Vuforia AR单元识别真实环境中的涂色区域，根据涂色信息在其对应的3D模型上进行贴图和叠加。最后，在系统的显示器上显示真实环境、多媒体资源、以及3D模型。该系统还允许用户通过交互模块控制3D模型、动画、音频、特效等的播放、暂停和停止。

申请号为CN2016101114367的专利文件所公开的一种基于文字识别的移动增强现实阅读方法及其阅读系统，其技术方案为：由移动设备获取包含文字内容的原始图像，并上传至服务器。服务器对文字定位、提取、并获得关键字，根据各个关键字分别调出与其相关的多媒体资源，然后发送回移动设备。移动终端将接收到的每组多媒体资源都精准的叠加在原始图像上，供用户点击选择。用户可通过调整移动终端与纸质书本的相对位置、相对角度等，改变多媒体资源在屏幕上的显示大小、角度等。

申请号为CN 2017114796231的专利文件所公开的一种基于增强现实的电子书呈现方法、电子设备及存储介质，其允许用户在电子书中开启文本转语音TTS朗读功能，系统收到该功能指令后，获取与当前电子书对应的AR动画模型，启动TTS朗读功能并同步播放AR动画。其中，AR动画模型又分为第一AR动画与第二AR动画，分别对应于：用户开启摄像头捕获真实场景所渲染而成的AR动画，以及系统根据电子书内容预制的AR动画。用户可通过调整移动终端的倾斜角度、倾斜方向和/或焦距变化，控制AR动画旋转相应的角度和/或缩放相应的大小。

以上述对比文件为代表的现有增强现实电子绘本，都利用了增强现实技术来呈现绘本的多媒体内容，但其主要缺点在于：1)电子绘本的交互界面层级较单一，不利于对其所呈现的内容进行有效的播放控制。2)用户与电子绘本所呈现内容之间的互动不多，且用户的部分交互操作不符合自然的触屏交互习惯。以上缺点使得增强现实的信息表现效果受到限制，电子绘本难以向用户提供良好的阅读体验。

术语解释：

增强现实(Augmented Reality，AR)：利用电脑等科学技术，对于在真实世界中难以体验的信息进行虚拟仿真，将其叠加在真实世界中，使得真实环境和虚拟物体能够在同一个画面以及空间中同时存在。以上过程能够被人类感官所感知，从而使人类获得超越现实的感官体验。目前用于实现AR的主流软件包括Unity 3D等。

绘本(Picture Book)：文字与图画相辅相成的图画故事书，表达特定情感和主题的读本。

发明内容