[发明专利]一种基于增强现实的复杂设备操作运行在位仿真系统

摘要

本发明公开了一种基于增强现实的复杂设备操作运行在位仿真系统，包括：仿真场景模块，其生成场景三维点云模型，建立复杂设备仿真模型，操作人员远程操作复杂设备仿真模型；增强现实模块，其将复杂设备仿真模型叠加在实时场景图像中，展示复杂设备仿真模型在当前场景图像中位置及3D操作手册；设备管理模块，其获取复杂设备实时运行状态，存储3D操作手册并发送至增强现实模块，接收远程操作控制的实时视频信息并与操作人员远程3D可视交流；通信模块，其实现设备管理模块与仿真场景模块和增强现实模块之间通信；交互接口模块，其用于仿真场景模块和增强现实模块之间的交互。本发明的有益效果：实现大型复杂设备在位仿真的操作运行培训和指导。

主权项

1.一种基于增强现实的复杂设备操作运行在位仿真系统，其特征在于，包括：仿真场景模块，其对在一定时间间隔内实时循环采集到的当前复杂设备所在的真实场景图像进行分析处理重建，生成场景三维点云模型，从中识别出该复杂设备，并对该复杂设备进行实时跟踪，确定当前复杂设备在真实环境中的位置与姿态，将位置与姿态信息传入虚拟环境，在虚拟环境中对复杂设备建模，建立复杂设备仿真模型，操作人员根据该复杂设备的3D操作手册，结合场景三维点云模型远程操作控制该复杂设备仿真模型，并将远程操作的实时视频信息发送给设备管理模块；增强现实模块，其通过可穿戴AR设备将复杂设备仿真模型叠加在实时采集到的场景图像中，实现虚实的视觉融合，展示复杂设备仿真模型在当前场景图像中的位置，完成对复杂设备和操作运行环境的虚拟再现，并对设备管理模块发送的复杂设备的3D操作手册进行展示，供操作人员对复杂设备仿真模型进行远程操作控制；设备管理模块，其用于获取各个复杂设备的实时运行状态，存储各个复杂设备的3D操作手册，并发送3D操作手册至所述增强现实模块，接收操作人员远程操作控制复杂设备仿真模型的实时视频信息，并实现与操作人员的远程3D可视交流；通信模块，其用于实现所述设备管理模块与所述仿真场景模块和所述增强现实模块之间的通信；交互接口模块，其用于所述仿真场景模块和所述增强现实模块之间的交互。