[发明专利]混合现实系统、程序、移动终端装置和方法

权利要求书

1.一种混合现实系统，用于在显示器上显示混合现实图像，所述显示器用于向存在于规定真实空间中的用户显示虚拟物体，在所述混合现实图像中，布置在与真实空间相对应的虚拟空间中的虚拟物体的图像被叠加在真实空间的拍摄图像上，所述混合现实系统包括具有所述显示器和用于拍摄真实空间的拍摄装置的移动终端装置，其中，

所述混合现实系统包括布置在所述规定真实空间中的多个特征点集合，所述特征点集合包括使得能够对各特征点集合进行辨识的可辨识信息，并且所述多个特征点集合中的至少三个特征点集合被布置成具有预定义位置关系；以及

所述移动终端装置进行以下操作：

存储预先获得的第一虚拟物体的数据、以及虚拟空间中的不与真实物体相对应的第二虚拟物体的数据，并且存储用于布置在所述规定真实空间中的各特征点集合的虚拟空间中的布置位置姿势信息，所述第一虚拟物体与存在于所述规定真实空间中的真实物体相对应并且定义虚拟空间，

识别所述拍摄装置所拍摄的各特征点集合，

基于用于各特征点集合的所述布置位置姿势信息、以及所述移动终端装置相对于各特征点集合的相对位置姿势信息，来确定与真实空间中的所述拍摄装置的位置和拍摄方向相对应的、虚拟空间中的虚拟照相机的视点位置，所述布置位置姿势信息是从所识别的特征点集合中的一部分或全部特征点集合的可辨识信息获得的，所述相对位置姿势信息是从所述特征点集合的形状和大小确定的，以及

基于所述第一虚拟物体的数据、所述第二虚拟物体的数据和所述视点位置，来生成与所述视点位置相对应的所述第二虚拟物体的图像被叠加在真实空间的拍摄图像上的混合现实图像。

2.根据权利要求1所述的混合现实系统，其中，在生成所述混合现实图像时在所述虚拟照相机的视场范围中所述第一虚拟物体和所述第二虚拟物体彼此重叠的情况下，如果所述第二虚拟物体相对于所述视点位置的深度距离大于所述第一虚拟物体相对于所述视点位置的深度距离，则所述移动终端装置生成叠加了所述第二虚拟物体的被去除了重叠部分的图像的混合现实图像。

3.根据权利要求1或2所述的混合现实系统，其中，

所述混合现实系统包括五个或更多个所述特征点集合，以及

所述移动终端装置以规定时间间隔识别所述拍摄装置所拍摄的各特征点集合，确定所述视点位置，并且生成所述混合现实图像。

4.根据权利要求1至3中任一项所述的混合现实系统，其中，所述混合现实系统包括布置在所述规定真实空间中的四个所述特征点集合，各个特征点集合具有与真实空间中的虚拟矩形的四个顶点位置相对应的位置关系，并且各个特征点集合被布置成在垂直方向上彼此远离预定义距离且在水平方向上彼此远离预定义距离。

5.根据权利要求4所述的混合现实系统，其中，一个或多个所述特征点集合固定地附接到以在水平方向上隔离的方式安装的多个棒状体中的各棒状体。

6.根据权利要求1至4中任一项所述的混合现实系统，其中，各特征点集合固定地附接到由透光材料形成的透射构件。

7.根据权利要求1至4中任一项所述的混合现实系统，其中，各特征点集合通过使用线来固定地附接。

8.根据权利要求1至7中任一项所述的混合现实系统，其中，所述特征点集合是海报、绘画、图片、ArUco标记、AR标记、二维码或数据矩阵。