[发明专利]增强现实方法及装置

说明书

本发明实施例涉及图像处理技术领域，提供一种增强现实方法及装置，应用于具备摄像装置的电子设备，所述方法包括：获取摄像装置采集的原始图像；将原始图像输入预先训练好的语义分割网络，得到包含深度逻辑关系的分割结果图；基于深度逻辑关系，确定出分割结果图中的前景图像坐标；利用前景图像坐标对场景贴图进行逻辑运算，得到具有深度逻辑信息的场景贴图；将原始图像与具有深度逻辑信息的场景贴图进行图像合成，得到具有深度信息的贴图结果图像。本发明实施例提供的增强现实方法使增强现实显示图像具有深度逻辑关系，与现有技术相比具有更好的真实感。

技术领域

本发明实施例涉及图像处理技术领域，具体而言，涉及一种增强现实方法及装置。

背景技术

增强现实(Augmented Reality，AR)是一种实时计算摄像机位置和角度并在真实场景中叠加虚拟物体的技术，其通过附加虚拟的数字信息以提升用户与真实环境的交互体验。增强现实的大致过程为：首先在真实场景中定位摄像机位姿，然后采用计算机图形渲染技术将虚拟物体注册到真实场景中生成虚实融合的应用视图。但是，这种基于单摄像机透视关系进行图像合成的增强现实技术，不能根据拍摄物体的深度关系进行显示，故存在着真实感较差的问题。

发明内容

本发明实施例的目的在于提供一种增强现实方法及装置，用以改善上述问题。

为了实现上述目的，本发明实施例采用的技术方案如下：

第一方面，本发明实施例提供了一种增强现实方法，应用于具备摄像装置的电子设备，所述方法包括：获取所述摄像装置采集的原始图像；将所述原始图像输入预先训练好的语义分割网络，得到包含深度逻辑关系的分割结果图；基于所述深度逻辑关系，确定出所述分割结果图中的前景图像坐标；利用所述前景图像坐标对场景贴图进行逻辑运算，得到具有深度逻辑信息的场景贴图；将所述原始图像与具有深度逻辑信息的场景贴图进行图像合成，得到具有深度信息的贴图结果图像。

第二方面，本发明实施例还提供了一种增强现实装置，应用于具备摄像装置的电子设备，所述装置包括原始图像获取模块、语义分割模块、前景图像坐标确定模块、执行模块及图像合成模块。其中，原始图像获取模块用于获取所述摄像装置采集的原始图像；语义分割模块用于将所述原始图像输入预先训练好的语义分割网络，得到包含深度逻辑关系的分割结果图；前景图像坐标确定模块用于基于所述深度逻辑关系，确定出所述分割结果图中的前景图像坐标；执行模块用于利用所述前景图像坐标对场景贴图进行逻辑运算，得到具有深度逻辑信息的场景贴图；图像合成模块用于将所述原始图像与具有深度逻辑信息的场景贴图进行图像合成，得到具有深度信息的贴图结果图像。

相对现有技术，本发明实施例提供的一种增强现实方法及装置，首先，将摄像装置采集的原始图像输入预先训练好的语义分割网络得到包含深度逻辑关系的分割结果图；然后，基于深度逻辑关系，确定出分割结果图中的前景图像坐标，并利用前景图像坐标对场景贴图进行逻辑运算得到具有深度逻辑信息的场景贴图；最后，将原始图像与具有深度逻辑信息的场景贴图进行图像合成，得到具有深度信息的贴图结果图像，从而使增强现实显示图像具有深度逻辑关系，与现有技术相比具有更好的真实感。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本发明实施例提供的电子设备的方框示意图。

图2示出了本发明实施例提供的增强现实方法流程图。

图3为图2示出的步骤S102的子步骤流程图。