[发明专利]虚拟体验内容提供方法及用于其的装置

说明书

本发明公开虚拟体验内容提供方法及用于其的装置。本发明一实施例的虚拟体验内容提供方法包括：生成与远离用户的现实世界空间相关的实时三维可视化数据，基于体验场景，与利用多个结构物构成的体验空间相对应地生成三维虚拟空间，基于在体验空间内所具有的多个传感器，测定在体验空间中的用户动作来获取用户对象数据，整合三维虚拟空间和实时三维可视化数据来生成三维体验空间，利用用户对象数据、三维体验空间及体验空间向用户提供与现实世界空间相对应的实时虚拟体验内容的步骤。

技术领域

本发明涉及虚拟体验内容提供技术，尤其，涉及使实际环境和虚拟环境在统一的空间内共存从而实现在实际环境内中很难经历的体验的虚拟体验内容提供方法及用于其的装置。

背景技术

在利用以往的头戴式显示器(HMD，Head Mounted Display)的体验内容的情况下，以坐或站立的形态为主，即便是支持行走的动作，也相应于在没有受限的结构物的开放空间进行体验的形态，因此，用户感受到的现实感或存在感方面水平明显较低。

并且，以往的HMD形态的虚拟现实内容大部分依赖于视觉部分，脱离了实际体验环境，因而存在较大的背离感。

因此，以往头戴式显示器内容，其众多用户在内容初期因新颖而有良好的反应，但在反复体验的情况下，因与现实部分的背离感，导致容易厌倦和失望。

现有技术文献

专利文献

(专利文献)韩国公开专利第10-2016-0127695号，2016年11月04日公开(名称：利用实感数据的虚拟高尔夫游戏提供系统及方法)

发明内容

本发明的目的在于，超越用户之间的时间、空间上的制约，提供如同远距离的用户存在于同一空间内的体验。

此外，本发明的目的在于，提供与智能虚拟形象等配合而实现逼真的互动的实际和虚拟的空间共存的融合型虚拟现实系统。

此外，本发明的目的在于，提供一种系统，可自由建立符合内容的现实空间，并且重建符合现实空间的虚拟空间，从而可提供如同实际和虚拟共存的体验。

用于实现上述目的的本发明的虚拟体验内容提供方法包括：生成与远离用户的现实世界空间相关的实时三维可视化数据的步骤；基于体验场景，与利用多个结构物构成的体验空间相对应地生成三维虚拟空间的步骤；基于在上述体验空间内所具有的多个传感器，测定在上述体验空间中的用户动作来获取用户对象数据的步骤；以及整合上述三维虚拟空间和上述实时三维可视化数据来生成三维体验空间，利用上述用户对象数据、上述三维体验空间及上述体验空间向上述用户提供与上述现实世界空间相对应的实时虚拟体验内容的步骤。

在此情况下，用户对象数据、上述三维体验空间及上述体验空间在时间、空间及视觉上可以实现同步。

在此情况下，提供的步骤可包括：在通过上述用户所佩戴的佩戴型显示器来输出上述三维体验空间时，基于上述用户对象数据，向上述佩戴型显示器输出考虑了上述三维体验空间中上述用户的位置及视线中的至少一个的区域的步骤。

在此情况下，提供的步骤还可包括：基于上述用户对象数据来分析上述用户的倾向的步骤；以及生成与符合上述用户的倾向的脸部表情及全身运动中的至少一个相对应的虚拟形象并输出到上述三维体验空间的步骤。

在此情况下，提供的步骤可包括：通过使与至少一个特征点相对应的坐标一致的方式来整合上述三维虚拟空间和上述实时三维可视化数据的步骤。

在此情况下，生成实时三维可视化数据的步骤可包括：在实时捕获上述现实世界空间的图像中分离背景和人的步骤；以及生成与上述背景相对应的三维背景可视化数据，并以点云数据的形态来生成与上述人相对应的三维人体可视化数据的步骤。