[发明专利]VR眼镜的实景观测方法及VR眼镜

说明书

本发明提供一种VR眼镜的实景观测方法及VR眼镜。其中，方法包括：响应于获取下一帧待显示图像的指令，确定当前时刻的用户头部位姿数据；根据所述当前时刻的用户头部位姿数据以及所述广角摄像头拍摄实景图像时刻的用户头部位姿数据，从所述广角摄像头拍摄到的所述实景图像中选取送屏图像；将所述送屏图像作为下一帧待显示图像发送至显示屏进行显示，以供用户观测。本发明提供的技术方案，可以在用户通过VR眼镜观测实景环境时，降低实景环境图像的延迟。

技术领域

本发明涉及虚拟现实技术领域，尤其涉及一种VR眼镜的实景观测方法及VR眼镜。

背景技术

VR(Virtual Reality，虚拟现实)技术是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种模拟环境，并通过多源信息融合的、交互式的三维动态视景和实体行为的系统仿真使用户沉浸到该模拟环境中。

在使用VR眼镜的过程中，用户可能需要观测现实景环境，比如在佩戴VR眼镜玩游戏的过程中，要拿桌上的水杯喝水。若用户在观测实景环境时发生头部转动，则随着用户头部的转动，用户通过VR眼镜看到的实景图像会发生延迟或卡顿。

发明内容

本发明提供一种VR眼镜的实景观测方法及VR眼镜，用以在用户通过VR眼镜观测实景环境时，降低实景环境图像的延迟。

本发明提供一种VR眼镜的实景观测方法，适用于包含广角摄像头的VR眼镜，包括：

响应于获取下一帧待显示图像的指令，确定当前时刻的用户头部位姿数据；

根据所述当前时刻的用户头部位姿数据以及所述广角摄像头拍摄实景图像时刻的用户头部位姿数据，从所述广角摄像头拍摄到的所述实景图像中选取送屏图像；

将所述送屏图像作为下一帧待显示图像发送至显示屏进行显示，以供用户观测。

进一步可选地，根据所述当前时刻的用户头部位姿数据以及所述广角摄像头拍摄实景图像时刻的用户头部位姿数据，从所述广角摄像头拍摄到的所述实景图像中选取送屏图像，包括：根据所述当前时刻的用户头部位姿数据，确定获取送屏图像时刻的用户头部位姿数据；根据所述获取送屏图像时刻的用户头部位姿数据以及所述拍摄实景图像时刻的用户头部位姿数据，获取图像选取框的倾角以及所述图像选取框的中心点在所述实景图像中对应的位置；根据所述倾角，旋转所述图像选取框；采用所述旋转后的图像选取框，以所述图像选取框的中心点在所述实景图像中对应的位置为取景中心，从所述实景图像中选取送屏图像。

进一步可选地，根据所述当前时刻的用户头部位姿数据，确定获取送屏图像时刻的用户头部位姿数据，包括：以所述当前时刻的用户头部位姿数据作为获取送屏图像时刻的用户头部位姿数据。

进一步可选地，根据所述当前时刻的用户头部位姿数据，确定获取送屏图像时刻的用户头部位姿数据，包括：根据所述当前时刻的用户头部位姿数据，预测显示送屏图像时刻的用户头部位姿数据；以显示送屏图像时刻的用户头部位姿数据作为获取送屏图像时刻的用户头部位姿数据。

进一步可选地，获取图像选取框的倾角，包括：获取用户头部从所述拍摄实景图像时刻至所述获取送屏图像时刻的转动数据；根据所述转动数据所指示的用户头部的转动角以及转动方向，确定所述图像选取框的倾角；获取所述图像选取框的中心点在所述实景图像中对应的位置，包括：从所述头部转动数据中，确定所述VR眼镜的透镜的视场中心从所述拍摄实景图像时刻到所述获取送屏图像时刻在与所述VR眼镜平行的方向上的位移；在所述实景图像中，基于所述位移，确定与所述实景图像的中心点存在相应偏移量的一点，作为所述图像选取框的中心点在所述实景图像中对应的位置。

进一步可选地，采用旋转后的图像选取框，以所述图像选取框的中心点在所述实景图像中对应的位置为取景中心，从所述实景图像中选取送屏图像之前，还包括：根据所述透镜的视场角以及所述透镜和所述显示屏之间的距离，确定图像选取框的尺寸。