[发明专利]基于增强现实的虚拟物体的放置方法及装置

权利要求书

1.一种基于增强现实的虚拟物体的放置方法，其特征在于，包括：

确定目标区域，其中，所述目标区域表示目标虚拟物体在参考帧中所处的区域；

根据所述目标区域，获取所述目标虚拟物体在所述参考帧中的深度信息；

提取所述参考帧中的SIFT特征点；

在当前帧中跟踪所述目标区域；

在所述当前帧中跟踪到所述目标区域，且所述当前帧与所述参考帧的SIFT特征点相匹配的情况下，根据所述深度信息，在所述目标区域放置所述目标虚拟物体。

2.根据权利要求1所述的方法，其特征在于，根据所述目标区域，获取所述目标虚拟物体在所述参考帧中的深度信息，包括：

获取所述参考帧对应的第一图像和第二图像；

分别提取所述第一图像对应的第一特征图和所述第二图像对应的第二特征图；

根据所述第一特征图与所述第二特征图，得到所述参考帧对应的深度图像；

根据所述目标区域，从所述深度图像中获取所述目标虚拟物体在所述参考帧中的深度信息。

3.根据权利要求2所述的方法，其特征在于，获取所述参考帧对应的第一图像和第二图像，包括以下任意一项：

通过双摄像头获取所述参考帧在同一时刻对应的第一图像和第二图像；

获取所述参考帧在不同时刻对应的第一图像和第二图像。

4.根据权利要求1所述的方法，其特征在于，在当前帧中跟踪所述目标区域，包括：

采用光流跟踪法在所述当前帧中跟踪所述目标区域。

5.根据权利要求1所述的方法，其特征在于，在当前帧中跟踪所述目标区域，包括：

通过卷积神经网络提取所述目标区域的特征；

采用滑动窗口，通过所述卷积神经网络提取当前帧中各个区域的特征；

在所述当前帧中第一区域的特征与所述目标区域的特征的相似度大于第一阈值，且所述第一区域的特征与所述目标区域的特征的相似度大于所述当前帧中其他区域的特征与所述目标区域的特征的相似度的情况下，确定在所述当前帧中跟踪到所述目标区域，并将所述第一区域确定为所述目标区域。

6.一种基于增强现实的虚拟物体的放置装置，其特征在于，包括：

确定模块，用于确定目标区域，其中，所述目标区域表示目标虚拟物体在参考帧中所处的区域；

获取模块，用于根据所述目标区域，获取所述目标虚拟物体在所述参考帧中的深度信息；

提取模块，用于提取所述参考帧中的SIFT特征点；

跟踪模块，用于在当前帧中跟踪所述目标区域；

放置模块，用于在所述当前帧中跟踪到所述目标区域，且所述当前帧与所述参考帧的SIFT特征点相匹配的情况下，根据所述深度信息，在所述目标区域放置所述目标虚拟物体。

7.根据权利要求6所述的装置，其特征在于，所述获取模块包括：

第一获取子模块，用于获取所述参考帧对应的第一图像和第二图像；

第一提取子模块，用于分别提取所述第一图像对应的第一特征图和所述第二图像对应的第二特征图；

第一确定子模块，用于根据所述第一特征图与所述第二特征图，得到所述参考帧对应的深度图像；

第二获取子模块，用于根据所述目标区域，从所述深度图像中获取所述目标虚拟物体在所述参考帧中的深度信息。

8.根据权利要求7所述的装置，其特征在于，所述第一获取子模块用于以下任意一项：

通过双摄像头获取所述参考帧在同一时刻对应的第一图像和第二图像；

获取所述参考帧在不同时刻对应的第一图像和第二图像。

9.根据权利要求6所述的装置，其特征在于，所述跟踪模块用于：

采用光流跟踪法在所述当前帧中跟踪所述目标区域。