[发明专利]3D医学图像的虚拟现实或增强现实可视化

权利要求书

1.一种虚拟现实或增强现实可视化系统，包括：

导管，其被配置为插入对象的心血管器官内，所述导管包括生成第一组传感器数据的一个或多个传感器；

头戴式显示器HMD，其被配置为由操作者佩戴，并且响应于接收3D图像以在所述操作者的视场中以3D显示表示所述心血管器官的电解剖可视化，其中所述3D图像至少包括第一3D图像和第二3D图像；

输入装置，其被配置为响应于所述操作者的运动生成第二组传感器数据；以及

一个或多个计算机，其通信地耦接到所述导管以接收所述第一组传感器数据，通信地耦接到所述输入装置以接收所述第二组传感器数据，以及经由无线数据交换协议通信地耦接到所述HMD，其中所述一个或多个计算机包括一个或多个处理器以及计算机程序指令，所述计算机程序指令在被执行时使所述一个或多个处理器：

通过处理所述第一组传感器数据生成所述第一3D图像；

向所述HMD提供所述第一3D图像；

接收响应于所述操作者的运动以与所述电解剖可视化交互的所述第二组传感器数据；

通过处理所述第二组传感器数据确定所述操作者的运动路径；

基于所述运动路径确定所述电解剖可视化的旋转角度；以及

向所述HMD提供所述第二3D图像，以通过在所述操作者的所述视场中旋转所述心血管器官一定旋转角度来更新所述电解剖可视化的显示。

2.根据权利要求1所述的系统，其中，所述操作者使用所述操作者的手执行所述运动中的至少一个，以及其中，在所述操作者执行所述运动中的至少一个的同时，所述手不物理地触摸所述输入装置。

3.根据权利要求1所述的系统，其中，所述一个或多个传感器包括阻抗传感器，磁传感器和超声传感器中的至少一个。

4.根据权利要求1所述的系统，其中，所述一个或多个计算机还包括计算机程序指令，所述计算机程序指令被执行时使所述一个或多个处理器：

向所述HMD提供第三3D图像，以在所述操作者的所述视场中显示所述心血管器官的心电图，

从所述输入装置接收第三组传感器数据，所述第三组传感器数据指示所述操作者的身体部分的随后运动以将一个或多个虚拟标记定位在所述心电图上；

通过处理所述第三组传感器数据来基于所述一个或多个虚拟标记的位置确定度量；以及

向所述HMD提供所述度量以更新所述操作者的所述视场中的所述心电图的显示。

5.根据权利要求4所述的系统，其中，生成所述电解剖可视化的所述第一3D图像包括：

在3D中将所述第一组传感器数据的第一多个点映射到所述第三组传感器数据的第二多个点，其中所述第一组传感器数据和所述第三组传感器数据在不同的物理单元中生成。

6.根据权利要求1所述的系统，其中，生成所述电解剖可视化的所述第一3D图像包括：

生成表示所述心血管器官的3D几何形状的一系列连接的2D多边形。

7.根据权利要求1所述的系统，其中，所述一个或多个计算机还包括计算机程序指令，所述计算机程序指令被执行时使所述一个或多个处理器：

在向所述HMD提供所述第二3D图像的同时向由另一个操作者佩戴的另一个HMD提供第三3D图像，以通过在所述另一个操作者的另一个视场中旋转所述心血管器官一定旋转角度来显示所述电解剖可视化。