[发明专利]电机产线增强现实监控方法、装置、电子设备及存储介质

权利要求书

1.一种电机产线增强现实监控方法，其特征在于，应用于仿真模块，所述方法包括：

建立电机产线的数字孪生模型；

通过实时数据采集模块获取所述电机产线的实时数据，所述实时数据包括产线信息和产品信息；

基于所述实时数据驱动所述数字孪生模型运转，获得虚拟电机产线信息；

将所述虚拟电机产线信息发送至虚实融合模块和监控模块，以使所述虚实融合模块基于所述虚拟电机产线信息获得增强现实信息，以及所述监控模块基于所述虚拟电机产线信息和所述增强现实信息对所述电机产线进行虚拟现实显示或增强现实显示。

2.根据权利要求1所述的方法，其特征在于，所述建立电机产线的数字孪生模型，包括：

通过真实相机获取所述电机产线的真实图像；

对所述真实图像进行目标特征提取，获得特征图像；

基于所述特征图像建立所述数字孪生模型。

3.根据权利要求1所述的方法，其特征在于，所述数字孪生模型包括所述电机产线的各个设备的子模型，所述电机产线的设备包括六轴机器人、插纸机、绕嵌一体机、绑扎机和输送导轨中的至少一个。

4.根据权利要求3所述的方法，其特征在于，所述通过实时数据采集模块获取所述电机产线的实时数据，包括：

通过所述实时数据采集模块的Modbus接口采集所述电机产线的所述各个设备的可编程逻辑控制器PLC实时数据，所述PLC实时数据为所述产线信息，所述PLC实时数据包括机器人各关节角度、机器人抓手控制指令、加工设备状态信息、加工设备运动结构的控制指令中的至少一个；

通过所述实时数据采集模块的开放数据库连接ODBC接口采集制造企业生产过程执行管理系统中与所述电机产线对应的所述产品信息，所述生产信息包括工单编号、物料编码和工单计划中的至少一个。

5.一种电机产线增强现实监控方法，其特征在于，应用于虚实融合模块，所述方法包括：

通过真实相机采集电机产线的真实图像；

通过仿真模块获取虚拟电机产线信息；

基于所述真实图像和所述虚拟电机产线信息生成增强现实信息；

将所述增强现实信息发送至监控模块，以使所述监控模块基于所述增强现实信息对所述电机产线进行增强现实显示。

6.根据权利要求5所述的方法，其特征在于，所述基于所述真实图像和所述虚拟电机产线信息生成增强现实信息，包括：

获取所述虚拟电机产线信息中所述电机产线的虚拟坐标数据；

基于所述虚拟坐标数据确定虚拟相机姿态，所述虚拟相机姿态包括位置和姿态数据；

基于所述真实图像确定所述真实相机的真实相机姿态；

基于所述真实相机姿态和所述虚拟相机姿态，将所述真实图像与所述虚拟电机产线信息中的虚拟物体进行融合，获得所述增强现实信息。

7.一种电机产线增强现实监控装置，其特征在于，应用于仿真模块，所述装置包括：

模型建立模块，用于建立电机产线的数字孪生模型；

实时数据获取模块，用于通过实时数据采集模块获取所述电机产线的实时数据，所述实时数据包括产线信息和产品信息；

虚拟现实模块，用于基于所述实时数据驱动所述数字孪生模型运转，获得虚拟电机产线信息；

第一发送模块，用于将所述虚拟电机产线信息发送至虚实融合模块和监控模块，以使所述虚实融合模块基于所述虚拟电机产线信息获得增强现实信息，以及所述监控模块基于所述虚拟电机产线信息和所述增强现实信息对所述电机产线进行虚拟现实显示或增强现实显示。

8.一种电机产线增强现实监控装置，其特征在于，应用于虚实融合模块，所述装置包括：

真实图像获取模块，用于通过真实相机采集电机产线的真实图像；

虚拟信息获取模块，用于通过仿真模块获取虚拟电机产线信息；

增强现实模块，用于基于所述真实图像和所述虚拟电机产线信息生成增强现实信息；

第二发送模块，用于将所述增强现实信息发送至监控模块，以使所述监控模块基于所述增强现实信息对所述电机产线进行增强现实显示。