[发明专利]控制指令的获取方法、装置及电子设备

说明书

本申请提供了一种控制指令的获取方法、装置及电子设备，对于电子设备(如AR设备)的深度摄像头对目标对象(如手部)进行图像采集，得到的第一图像信息，从该第一图像信息识别到的目标对象的特征数据不满足预设条件，如目标对象的图像不完整，本申请能够获取鱼眼摄像头采集到的目标对象的第二图像信息，由于鱼眼摄像头要比深度摄像头的视场角大，能够获得完整的目标对象图像，所以，利用该第二图像信息和识别出的目标对象在第一图像信息中的位置信息，能够准确得到针对电子设备的控制指令，实现对电子设备的控制，保证使用者与电子设备的可靠交互。

技术领域

本申请主要涉及通信技术领域，更具体地说是涉及一种控制指令的获取方法、装置及电子设备。

背景技术

AR(Augmented Reality，增强现实)设备是一种利用AR技术的电子设备，以AR眼镜为例，由于AR技术能够将真实的环境和虚拟的物体实时地叠加到了同一个画面或空间，用户佩戴AR眼镜后，视野范围内出现什么物体，就能够在用户眼前展示相应的3D图像，实现了超越现实的感官体验。

然而，AR眼镜无法像手持设备一样方便操作，通常是使用语音或基于图像识别的手势等方式进行操作，极大约束了AR眼镜的交互方式。并且，因摄像头的视场角较小，往往会限制AR眼镜的图像识别范围，导致无法识别到完整手势，也就无法使用手势交互方式，实现对AR眼镜的操作。

发明内容

有鉴于此，本申请提供了一种控制指令的获取方法、装置及电子设备，用以解决现有技术中因摄像头的视场角较小，导致无法识别到完整手势的问题。

为了实现上述发明目的，本申请提供了以下技术方案：

本申请提供给了一种控制指令获取方法，所述方法包括

获取第一图像信息，并对所述第一图像信息进行图像识别，所述第一图像信息由电子设备的深度摄像头对目标对象进行图像采集得到；

如果识别到的所述目标对象的特征数据不满足预设条件，获取第二图像信息，所述第二图像信息由所述电子设备的鱼眼摄像头对所述目标对象进行图像采集得到；

利用所述第二图像信息和所述目标对象在所述第一图像信息中的位置信息，得到针对所述电子设备的控制指令。

优选地，所述利用所述第二图像信息和所述目标对象在所述第一图像信息中的位置信息，得到针对所述电子设备的控制指令，包括：

获取预先构建的所述深度摄像头与所述鱼眼摄像头的图像映射关系；

利用所述目标对象在所述第一图像信息中的位置信息，按照所述图像映射关系，从所述第二图像信息中提取所述目标对象的轮廓数据；

基于所述目标对象的特征数据及所述轮廓数据，得到所述目标对象的状态信息；

生成与所述目标对象的状态信息对应的控制指令。

优选地，所述深度摄像头与所述鱼眼摄像头的图像映射关系的构建过程包括：

获取所述深度摄像头的视场角投影在第一方向的截平面上的第一坐标数据，及所述鱼眼摄像头的视场角投影在所述第一方向的截平面上的第二坐标数据；

在标定所述深度摄像头和所述鱼眼摄像头的坐标系关系的情况下，利用所述第一坐标数据和所述第二坐标数据，生成所述深度摄像头和所述鱼眼摄像头的图像映射关系。

优选地，所述预设条件是指采集到的图像信息包含目标对象的完整轮廓数据的条件。

优选地，所述目标对象是手部，所述对所述第一图像信息进行图像识别，包括：

对所述第一图像信息进行手势分割，得到手部模型；

对所述手部模型进行手势分析，得到手势的轮廓特征；