[发明专利]一种三维场景呈现方法、装置及系统

说明书

本发明公开了一种三维场景呈现方法、装置及系统，该方法包括：通过摄像头一次扫描待处理图片并对其进行图像识别，以判断待处理图片是否为预定场景图片；若待处理图片为预定场景图片，则向用户显示与预定场景图片关联的预定关键词；获取用户针对预定关键词而提供的语音信息，对语音信息进行语音识别，以判断其中是否包括预定关键词并获取语音信息包括的预定关键词；通过摄像头二次扫描待处理图片，在屏幕中显示待处理图片位于扫描区域内的图像；获取与语音信息包括的预定关键词关联的三维对象，并将其加载到图像上，以向用户呈现三维场景。

本发明是2017年3月30日申请的发明专利申请201710203721.6的分案申请。

技术领域

本发明涉及图像处理技术领域，特别涉及一种三维场景呈现方法、装置及系统。

背景技术

随着图像处理及相关技术的发展，越来越多的人投入到AR(Augmented Reality，增强现实)技术的研究中。AR技术，是在现实的基础上作场景合成，增添一部分信息来扩展人们手中掌握的数据，将虚拟的信息应用到真实世界当中，糅合真实的环境与虚拟的物体实时叠加到同一空间、同一场景、同一画面，涉及图像识别、图像匹配、三维建模、视频显示及控制等多种技术，并可应用于教学、广告、零售业、医疗健康和娱乐游戏等多个领域中。

比如在教学领域中，以AR图书为首的AR产品发展更为迅猛。AR图书，顾名思义，就是将AR技术应用在书籍上，它最大的特点就是让静态的图文“活”起来。通常情况下，用户通过手机、平板等移动终端的摄像头去扫描AR图书指定页码上的图片以进行图像识别，若图像识别成功，则在移动终端中与该AR图书关联的应用里显示出简单的动画或三维模型，从而向用户呈现出整体的三维场景。然而，这一处理过程中与用户之间几乎没有任何交互行为，无法根据用户的需求来进行显示，也没有提供实际动手操作的机会，用户体验较差，特别是对儿童这类特定用户而言，吸引力较低。而且，不仅是AR图书，其他AR产品中同样会出现以上问题，因此需要一种新的三维场景呈现方法来优化上述处理过程。

发明内容

为此，本发明提供一种三维场景呈现的技术方案，以力图解决或者至少缓解上面存在的问题。

根据本发明的一个方面，提供一种三维场景呈现方法，适于在移动终端中执行，移动终端包括数据存储设备，数据存储设备中存储有与预定场景图片关联的预定关键词，以及与预定关键词关联的三维对象，该方法包括如下步骤：通过摄像头一次扫描待处理图片并对其进行图像识别，以判断待处理图片是否为预定场景图片；若待处理图片为预定场景图片，则向用户显示与预定场景图片关联的预定关键词；获取用户针对预定关键词而提供的语音信息，对语音信息进行语音识别，以判断其中是否包括预定关键词并获取语音信息包括的预定关键词；通过摄像头二次扫描待处理图片，在屏幕中显示待处理图片位于扫描区域内的图像；从数据存储设备中获取与语音信息包括的预定关键词关联的三维对象，并将其加载到图像上，以向用户呈现三维场景。

可选地，在根据本发明的三维场景呈现方法中，数据存储设备中存储有对应于预定场景图片的图像特征集，通过摄像头一次扫描待处理图片并对其进行图像识，以判断待处理图片是否为预定场景图片的步骤包括：开启摄像头扫描待处理图片；获取待处理图片位于扫描区域内的图像；提取图像的特征点以生成待识别特征集；从数据存储设备中获取图像特征集，将待识别特征集与该图像特征集进行特征匹配；若匹配成功，则判断待处理图片为预定场景图片。

可选地，在根据本发明的三维场景呈现方法中，图像特征集包括多个图像特征点，将待识别特征集与该图像特征集进行特征匹配的步骤包括：将待识别特征集与该图像特征集进行特征匹配，统计匹配成功的特征点的数量作为匹配对数量；获取待识别特征集的特征点的数量作为第一数量，获取该图像特征集中图像特征点的数量作为第二数量；计算匹配对数量与第一数量和第二数量中较小值的比值作为图像匹配度；若图像匹配度大于第一阈值，则判断图像特征集匹配成功。