[发明专利]一种基于AR眼镜云机器人全息评审系统及方法

说明书

本发明的一个技术方案是提供了一种基于AR眼镜云机器人全息评审系统，其特征在于，包括本地设备及机器人云平台系统，其中，为每个位于异地的用户配备一套本地设备，所有位于异地的本地设备之间通过机器人云平台系统实现数据交互。本发明的另一个技术方案是提供了一种两位用户利用上述的全息评审系统进行机器人全息评审的方法。本发明可以将远程工程师的动作、对三维模型的修改和语音发送至另一位与之交流的工程师实现全息通话，可以让己方工程师了解到对方工程师的视线、动作、对全息模型的操作和语音，极大程度上还原了对机器人设备的现场评审过程，提高了效率，缩短了异地评审的周期。

技术领域

本发明一种基于AR眼镜云机器人全息评审系统及基于该系统的评审方法，属于机器人云平台技术领域。

背景技术

目前基于AR眼镜的异地交流模式基本上是AR眼镜和移动端或者PC端的远程视音频通讯，交流方式比较单一。申请公布号为CN108170273A、申请公布日为2018年6月15日的中国发明专利申请公开了一种基于hololens眼镜的专家远程指导系统及实现方法，包括hololens智能眼镜、无线路由器、服务器、终端设备，hololens智能眼镜将采集的音视频通过服务器转发至终端设备，专家在终端设备上输入指导内容，终端设备记录下指导内容，并将指导内容通过服务器转发至hololens智能眼镜，并在视野中显示，通过喇叭播放出专家的指导语音；后台终端自动生成维修记录视频文件，并上传到服务器中。

上述专利申请的技术方案可以实现与专家端的远程视音频通讯以及空间锚点的标注，其仅能实现视音频通话和空间锚点的标注，并不能够显示三维空间信息，无法达到现场交流演示的效果。

发明内容

本发明的目的是：提供一种能够实现现场交流演示的基于AR眼镜的异地交流系统，用于对机器人进行全息评审。本发明的另一个目的是提供一种基于上述系统的方法。

为了达到上述目的，本发明的一个技术方案是提供了一种基于AR眼镜云机器人全息评审系统，其特征在于，包括本地设备及机器人云平台系统，其中，为每个位于异地的用户配备一套本地设备，所有位于异地的本地设备之间通过机器人云平台系统实现数据交互，其中：

本地设备包括：

动作捕捉模块，用于捕捉对应用户的动作信息，将捕捉到的动作信息发送给同一用户的AR眼镜；

本地数据处理单元，从机器人云平台系统获取机器人设备三维模型、机器人设备的工作状况信息、位于异地的用户的动作信息、位于异地的用户的语音信息、位于异地的用户的修改信息后，发送给当前用户的AR眼镜；当前用户可以通过本地数据处理单元对获取的机器人设备三维模型进行修改，并将修改信息发送给当前用户的AR眼镜；

具有语音捕捉及播放功能的AR眼镜，用于：1)显示接收自本地数据处理单元的机器人设备三维模型、机器人设备的工作状况信息、位于异地的用户的动作信息、位于异地的用户的修改信息，同时，播放位于异地的用户的语音信息；2)用于捕捉当前用户的语音信息；3)将捕捉到的语音信息、来自动作捕捉模块的动作信息、来自本地数据处理单元的修改信息上传至机器人云平台系统。

优选地，所述机器人云平台系统包括：

机器人工作状况采集器，用于采集机器人设备所处环境的工况信息数据；

云端机械工作状况信息处理单元，用于将机器人工作状况采集器采集的工况信息数据转换为所述工作状况信息后，发送给所述本地数据处理单元；

云端数据处理模块，用于从当前用户的所述本地数据处理单元获取动作信息、语音信息及修改信息后发送至云端数据转发模块；

云端数据转发模块，用于将当前用户的动作信息、语音信息及修改信息发送至对方用户的所述本地数据处理单元。