[发明专利]一种基于增强现实的检查方法、检查设备和远程协助方法

说明书

本申请涉及一种基于增强现实的检查方法、检查设备和远程协助方法，其包括以下步骤：定位步骤，获取取景框内的目标图像并与数据库内的预设图像进行匹配，并基于匹配结果确定问题对象，其中，取景框设置于目镜上，目标图像为取景框对准目标物体后落入取景框内目标物体的图像；示教步骤，获取问题对象对应的解决方案，并在目镜上投映解决方案对应的示教信息。本申请具有使得非专业人员能够对热力管道进行修复的优点。

技术领域

本申请涉及增强现实技术领域，尤其是涉及一种基于增强现实的检查方法及系统。

背景技术

传统热力管道修复中，热管的漏点位置和泄露原因往往多变，比如法兰盘上的螺丝发生锈蚀导致法兰盘的连接不紧密，或者密封圈发生老化破损而导致蒸汽泄露或热水泄露，或者管道产生裂缝而产生渗漏。检查漏点的过程较为漫长，且对于不同的漏点往往会有不同的修复方法，这通常需要熟练的专业维修人员到现场进行检查和判断，未经过长期培训的用户难以进行自行维护。

发明内容

为了使得非专业人员能够对热力管道进行修复，本申请提供一种基于增强现实的检查方法、检查设备和远程协助方法。

第一方面，本申请提供的一种基于增强现实的检查方法，采用如下的技术方案：

一种基于增强现实的检查方法，包括以下步骤：

定位步骤，获取取景框内的目标图像并与数据库内的预设图像进行匹配，并基于匹配结果确定问题对象，其中，取景框设置于目镜上，目标图像为取景框对准目标物体后落入取景框内目标物体的图像；

示教步骤，获取问题对象对应的解决方案，并在目镜上投映解决方案对应的示教信息。

通过采用上述技术方案，在损坏事件发生而需要进行解决时，目镜的朝向能够进行调整。在使用时目镜需要调整到标准姿态，比如目镜中部的取景框需要位于使用者正视前方的视线上，则用户盯住目标物体且转动头部时，各个取景框的位置将会发生改变，而使得不同的取景框在头部转动过程中能够框住目标图像。当目标物体位于适当的取景框中时，摄像头所获取的图像中，目标物体将会位于指定的位置。系统提取目标图像中的目标物体并进行识别，识别方法可通过多分类神经网络模型或其它的方法，从而判定出该目标图像对应于数据库中的物体信息，并判定目标对象是否为问题对象。通过该种方法，可以用于对现场的各种物体进行遍历识别，从而筛查出问题对象。再从云端或本地数据中提取预存的针对于该问题对象的解决方案，或是通过远程人工客服指导以获得解决方案，解决方案能够以动态图像或其它形式从在目镜上投映，投映的过程中可以与目标物体在目镜上的中心投影重叠，产生类似于交互的效果，比如形成光斑落在目标物体上面，或者光斑在目标物体的图像上移动以示意操作步骤，或者直接在目镜上播放维修影像，从而指导用户解决损坏事件。

综上，该方法能够使得非专业人员能够对热力管道进行修复，大量地节约人力，并缩短问题的处理周期。

可选的，所述定位步骤包括：

对取景框内的目标物体进行拍摄并进行特征提取；

基于预设特征信息与所提取特征的比较结果，识别出目标物体的种类；

基于识别结果的预录入损坏特征与所提取特征的比较结果，获得目标物体的损坏信息；

基于损坏信息判断目标物体是否为问题对象。

通过采用上述技术方案，取景框内的目标物体具有颜色、形状等特征，颜色具体不止肉眼可视颜色，还包括红外成像颜色等，形状具体指的目标物体上各线条的比例，线条的连续程度等特征，系统将图像中物体的该类信息提取出来。系统的数据库中预存有多种零件的预设特征信息，通过特征信息的对比，对目标物体的种类进行判定。在识别出目标物体后，基于目标物体的预录入的损坏特征与所提取的特征进行对比，判断物体是否发生损坏，若损坏则目标物体即为问题对象，若未损坏则目标物体为正常物体。

可选的，所述定位步骤还包括：

基于问题对象判断结果连接远程协助系统；