[发明专利]基于视线跟踪的增强现实交互方法和装置

说明书

本发明实施例公开了一种基于视线跟踪的增强现实交互方法和装置。所述方法包括：获取当前场景对应的场景图像，获取用户头部的方位信息，头部方位信息包括用户的头部高度信息以及头部偏转角度信息，根据头部方位信息确定场景图像当中的目标图像，获取用户眼睛的视线信息，并根据视线信息确定目标图像当中的目标对象，获取目标对象对应的虚拟增强信息，并将虚拟增强信息叠加至场景图像当中的相应位置。本申请利用用户的头部方位以及视线信息完成感光区域的目标选取，通过计算机的三维数字重建，将用户看到的真实场景与虚拟增强信息融合，从而提升增强现实的交互性。

技术领域

本发明涉及增强现实技术领域，尤其涉及一种基于视线跟踪的增强现实交互方法和装置。

背景技术

AR(Augmented Reality，增强现实)是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息、声音、味道、触觉等)通过电脑等科学技术，模拟仿真后，把真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。增强现实技术，不仅展现了真实世界的信息，而且将虚拟的信息同时显示出来，两种信息充、叠加。

目前国内外研究人员采用的三维注册方法无论是基于方位跟踪设备，基于计算机视觉，还是基于视觉—方位跟踪器混合跟踪，都是通过跟踪用户头部方位，获取头部位置信息的变化来实现虚实信息的叠加。视觉通道是人类与外部环境之间最重要的信息接口，人在增强信息空间中活动除了头部运动外，眼睛也在转动，以头部位置去近似视线方向，不考虑人眼运动，导致虚拟信息在真实空间中显示位置的误差较大。

发明内容

本发明实施例提供一种基于视线跟踪的增强现实交互方法和装置，可以将用户看到的真实场景与虚拟增强信息融合，从而提升增强现实的交互性。

本发明实施例提供了一种基于视线跟踪的增强现实交互方法，包括：

获取当前场景对应的场景图像；

获取用户头部的方位信息，所述头部方位信息包括用户的头部高度信息以及头部偏转角度信息；

根据所述头部方位信息确定所述场景图像当中的目标图像；

获取用户眼睛的视线信息，并根据所述视线信息确定所述目标图像当中的目标对象；

获取所述目标对象对应的虚拟增强信息，并将所述虚拟增强信息叠加至所述场景图像当中的相应位置。

相应地，本发明实施例还提供一种基于视线跟踪的增强现实交互装置，包括：场景获取模块、方位获取模块、图像确定模块、视线获取模块、对象确定模块以及增强模块；

所述场景获取模块，用于获取当前场景对应的场景图像；

所述方位获取模块，用于获取用户头部的方位信息，所述头部方位信息包括用户的头部高度信息以及头部偏转角度信息；

所述图像确定模块，用于根据所述头部方位信息确定所述场景图像当中的目标图像；

所述视线获取模块，用于获取用户眼睛的视线信息；

所述对象确定模块，用于根据所述视线信息确定所述目标图像当中的目标对象；

所述增强模块，用于获取所述目标对象对应的虚拟增强信息，并将所述虚拟增强信息叠加至所述场景图像当中的相应位置。

本发明实施例提供的基于视线跟踪的增强现实交互方法和装置，利用用户的头部方位以及视线信息完成感光区域的目标选取，通过计算机的三维数字重建，将用户看到的真实场景与虚拟增强信息融合，从而提升增强现实的交互性。

附图说明