[发明专利]一种基于混合现实设备的装配引导方法及系统

说明书

技术领域

本发明涉及虚拟现实领域，尤其涉及一种基于混合现实设备的装配引导方法及系统。

背景技术

目前，对于装配过程，主要还是依靠装配人员的经验、文字装配指导方案或装配指导视频等对产品或设备的组装、装配和维修过程等进行引导。虽然虚拟装配技术已经取得了很好的发展和进步，但是基于虚拟现实和增强现实场景的装配技术仍然有很大的空白，尤其在一些复杂产品的装配过程中，没有完善的装配指导解决方案。

现有的虚拟装配方案无法针对特定的装配步骤搭建组装系统，虚拟的装配场景无法和真实场景实时匹配，从虚拟装配到实际装配缺少有效的引导，虚拟显示界面不够真实、没有沉浸感，虚拟装配状态无法根据实际场景实时更新。

发明内容

本发明所要解决的技术问题是针对现有技术的不足，提供一种基于混合现实设备的装配引导方法及系统。

本发明解决上述技术问题的技术方案如下：

一种基于混合现实设备的装配引导方法，包括：

构建虚拟装配场景；

通过混合现实设备与现实装配场景进行融合；

对所述现实装配场景中的装配阶段和装配体进行识别；

根据识别出的所述装配阶段和识别出的所述装配体获取装配引导信息；

通过所述混合现实设备显示所述装配引导信息，对装配过程进行引导。

本发明的有益效果是：本发明提供的一种基于混合现实设备的装配引导方法，通过混合现实设备将构建的虚拟装配场景和现实场景进行融合，并对现实装配场景中的装配阶段和装配体进行识别，实现了针对特定的装配步骤进行装配引导，与真实的装配场景进行实时匹配，能够灵活实时地地识别出装配的各个阶段并给出相应的装配引导，通过混合显示设备现实装配引导信息具有直观的优点，具有沉浸感，提高装配引导的效率，减少装配过程中的出错率。

在上述技术方案的基础上，本发明还可以做如下改进。

进一步地，所述对所述现实装配场景中的装配阶段和装配体进行识别具体包括：

获取所述现实装配场景中各装配体的图像；

根据预先设置在全部所述装配体上的识别标记，对所述图像中的各装配体进行识别；

确定识别出的各所述装配体之间的层级关系；

根据识别出的各所述装配体和所述层级关系，确定当前装配阶段。

采用上述进一步方案的有益效果是：通过根据预先设置在装配体上的识别标记对装配体进行识别，并判断装配体之间的层级关系，根据识别出的装配体和彼此之间的层级关系，能够准确地识别出当前的装配阶段，提高识别的效率和准确度。

进一步地，还包括：

分别获取识别出的各所述装配体的RGB图像、深度图像、运动数据、温度数据、应力数据和应变数据；

根据预设的多源数据融合算法，分别在数据级、特征级和决策级对识别出的各所述装配体的RGB图像、深度图像、运动数据、温度数据、应力数据和应变数据进行融合决策处理，得到识别出的各所述装配体的实时状态信息。

采用上述进一步方案的有益效果是：通过将多源数据处理方法融合进增强现实场景识别和交互上，大大提高了数据的利用率和增强现实的实用性，具体通过多源数据处理方法对装配体的RGB图像、深度图像、运动数据、应力数据和应变数据进行融合处理，能够有效地识别出装配体的实时状态，便于对装配过程进行精确引导，以及对装配引导过程进行实时的调整和监控。

进一步地，还包括：

根据所述实时状态信息对识别出的各所述装配体的装配过程和装配结果进行监控，当装配成功时，记录所述装配结果；当装配出现错误时，向所述混合现实设备发送错误提示消息。

采用上述进一步方案的有益效果是：通过识别出的装配体的实时状态信息对装配过程进行监控，能够实时地对装配过程进行修正，对于装配过程的引导更具有时效性，能够减少装配过程中的操作错误，并通过实时状态信息对装配结果进行监控，能够更精确地统计出装配结果，便于查找装配不成功的装配体。

进一步地，所述构建虚拟装配场景具体包括：

构建虚拟场景；

获取装配流程和全部装配体的属性信息，并根据所述装配流程和属性信息生成多个装配阶段；

根据各所述装配体的属性信息确定各所述装配体之间的层级关系和时序关系；

根据各所述装配体之间的层级关系和时序关系生成各所述装配阶段的装配引导信息；