[发明专利]一种基于增强现实的复杂设备操作运行在位仿真系统

权利要求书

1.一种基于增强现实的复杂设备操作运行在位仿真系统，其特征在于，包括：

仿真场景模块，其对在一定时间间隔内实时循环采集到的当前复杂设备所在的真实场景图像进行分析处理重建，生成场景三维点云模型，从中识别出该复杂设备，并对该复杂设备进行实时跟踪，确定当前复杂设备在真实环境中的位置与姿态，将位置与姿态信息传入虚拟环境，在虚拟环境中对复杂设备建模，建立复杂设备仿真模型，操作人员根据该复杂设备的3D操作手册，结合场景三维点云模型远程操作控制该复杂设备仿真模型，并将远程操作的实时视频信息发送给设备管理模块；

增强现实模块，其通过可穿戴AR设备将复杂设备仿真模型叠加在实时采集到的场景图像中，实现虚实的视觉融合，展示复杂设备仿真模型在当前场景图像中的位置，完成对复杂设备和操作运行环境的虚拟再现，并对设备管理模块发送的复杂设备的3D操作手册进行展示，供操作人员对复杂设备仿真模型进行远程操作控制；

设备管理模块，其用于获取各个复杂设备的实时运行状态，存储各个复杂设备的3D操作手册，并发送3D操作手册至所述增强现实模块，接收操作人员远程操作控制复杂设备仿真模型的实时视频信息，并实现与操作人员的远程3D可视交流；

通信模块，其用于实现所述设备管理模块与所述仿真场景模块和所述增强现实模块之间的通信；

交互接口模块，其用于所述仿真场景模块和所述增强现实模块之间的交互。

2.根据权利要求1所述的复杂设备操作运行在位仿真系统，其特征在于，所述仿真场景模块通过图像采集组件在各个角度拍摄的深度图像合成场景三维点云模型。

3.根据权利要求1所述的复杂设备操作运行在位仿真系统，其特征在于，所述仿真场景模块还包括：检测操作员在操作过程中，所述复杂设备仿真模型在所述三维点云模型中是否发生碰撞，当发生碰撞致时，发送报警信息，并将报警信息发送给操作人员。

4.根据权利要求3所述的复杂设备操作运行在位仿真系统，其特征在于，所述报警信息包括语音反馈信息和可穿戴AR设备屏幕上展示的视频反馈信息。

5.根据权利要求1所述的复杂设备操作运行在位仿真系统，其特征在于，所述设备管理模块中对各个复杂设备分别设置一个标号，对每个标号的复杂设备的信息分别存储，包括复杂设备的复杂设备仿真模型、实时运行状态、3D操作手册和操作人员远程操作视频。

6.根据权利要求5所述的复杂设备操作运行在位仿真系统，其特征在于，所述设备管理模块还包括接收操作人员的查询请求，依据查询请求所对应复杂设备的标号，将该标号复杂设备对应的3D操作手册发送至所述增强现实模块。