[发明专利]一种基于AR智能眼镜的局部图像识别方法及系统

说明书

本发明公开了一种基于AR智能眼镜的局部图像识别方法及系统，具体涉及AR智能眼镜技术领域，其局部图像识别方法具体为：建立参照集→一致性校准标定→获取眼睛运动坐标→获取人眼在周围真实世界的映射关系→启动局部图像识别程序→局部图像的传输处理；其局部图像识别系统具体包括有DM6437处理核心和与DM6437处理核心呈双向连接的AR智能眼镜终端以及云端服务器。本发明通过采用微分算法或掩模算法对视野内的图像进行边缘探测，并对探测处的二值化图像进行修正，同时将视野内的图像嵌入到高维空间中，并通过计算嵌入到空间中的观察图像和对应样本原型表达的距离来排除视觉环境下无用图像信息的干扰，提升用户体验感。

技术领域

本发明涉及AR智能眼镜技术领域，更具体地说，本发明涉及一种基于AR智能眼镜的局部图像识别方法及系统。

背景技术

AR智能眼镜基于第一视角的交互方式，通过镜片将虚拟信息内容展示在用户的视场中，为用户提供增强现实的感官体验，是AR技术的智能终端硬件载体。

AR智能眼镜的应用范围广泛，可应用于工业、安防、医疗、教育等多个领域。如在工业领域，AR智能眼镜具有“实时虚实结合信息”的远程监控和指导功能，通过提供沉浸式和交互式的远程通讯体验，可辅助一线工作人员完成设备安装、维护、检修等工作。AR智能眼镜打破时间、地点和人物的限制，有效解决到现场指导成本高、因故障延误产生的经济损失、多人同步作业协调困难等问题；在安防领域，AR智能眼镜具有实时人脸或车牌识别、人证对比、远程调度、协同指挥等功能，可实现信息传递可视化和实时化，提升工作人员收集、处理信息的能力及效率；在医疗领域，佩戴AR智能眼镜的医生可通过第一视角拍摄手术过程，由远程的医生专家回传的画面进行远程指导，实现医生之间的实时和精准信息互动，提高诊断效率和优化医疗资源；在教育领域，AR智能眼镜以可视化和立体化的形式，将传统课堂的灌输式教学转变为寓教于乐的互动式教学。

但现有技术中的AR智能眼镜在进行局部图像识别时，往往容易被无用的信息干扰，从而降低产品的用户体验。

在所述背景技术部分公开的上述信息仅用于加强对本公开的背景的理解，因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

为了克服现有技术的上述缺陷，本发明的实施例提供一种基于AR智能眼镜的局部图像识别方法及系统，本发明所要解决的技术问题是：如何避免进行图像识别时被无用信息所干扰，从而提高用户体验。

为实现上述目的，本发明提供如下技术方案：一种基于AR智能眼镜的局部图像识别方法，具体包括如下步骤：

步骤一：建立参照集：在原型网络的嵌入空间中定义若干个样本；

步骤二：一致性校准标定：对AR智能眼镜摄像头进行图像畸变校正和标定；

步骤三：获取眼睛运动坐标：采用瞳孔-角膜反射光斑法或MEMS眼球追踪技术，来识别人眼图像并计算眼球运动向量，并将人眼的运动行为数字化，转化为计算机系统计算的电子信号；

步骤四：获取人眼在周围真实世界的映射关系：根据内嵌映射算法分别获取人眼注视点在眼镜成像屏幕和前置摄像头画面的坐标位置；

步骤五：启动局部图像识别程序：

(1)边缘探测：从待识别的图像中抽出线条，并检测出图像边缘或者抽出图像轮廓；

(2)二值图像处理：对检测出的二值化图像进行修正，使得图像更加清晰；

(3)将图像映射成嵌入向量：充分利用节点在原型网络中的拓扑关系，给出节点的隐含向量表示，从而将离散空间中的网络节点嵌入到高维空间中；

(4)定义图像原型：利用神经网络的非线性映射将输入图像映射到嵌入空间中，此时嵌入空间中参照集的加权平均值即为图像原型；