[发明专利]一种使用手势对移动终端进行操作的方法及装置

权利要求书

1.一种使用手势对移动终端进行操作的方法，其特征在于，包括如下步骤：

A)判断移动终端是否处于稳定的姿态，如是，执行下一步骤；否则，退出本次操作；

B)使能设置在所述移动终端设定位置上的传感器，判断在以所述移动终端为参考点的设定方向上是否存在物体，如是，执行下一步骤；否则，返回步骤A)；

C)使能设置在所述移动终端指定位置上的摄像头，取得在所述物体的形状数据，判断是否有物体稳定在以所述移动终端为参考点的设定方向上，如是，执行下一步骤；否则，返回步骤A)；

D)对所述取得的物体形状进行运算和分析，得到其代表的手势，并执行该手势对应的操作。

2.根据权利要求1所述的使用手势对移动终端进行操作的方法，其特征在于，所述步骤C)中，进一步包括如下步骤：

C1)将所述摄像头取得的RGB图像转换灰度图像，并将其放入一循环队列中；

C2)计算所述队列中多帧灰度图像的像素方差，并将其与设定阈值比较，如小于设定阈值，则判断为有物体稳定在以所述移动终端为参考点的设定方向上；否则，判断为无物体稳定在以所述移动终端为参考点的设定方向上。

3.根据权利要求2所述的使用手势对移动终端进行操作的方法，其特征在于，所述步骤D)进一步包括如下步骤：

D1)将得到的灰度图像输入到完成训练的卷积神经网络进行手势识别，得到其表示的手势；

D2)查找所述手势表示的操作内容并在所述移动终端上执行该操作。

4.根据权利要求3所述的使用手势对移动终端进行操作的方法，其特征在于，所述步骤A)中，通过惯性测量单元判断所述移动终端是否处于稳定的姿态；所述稳定的姿态包括所述移动终端静止或水平放置且放置时间超过设定时间。

5.根据权利要求4所述的使用手势对移动终端进行操作的方法，其特征在于，所述步骤B)中的传感器包括红外传感器，所述红外传感器检测到所述物体持续存在超过设定时间，则判断存在所述物体；所述红外传感器检测区域包括所述移动终端的显示屏上方位置。

6.根据权利要求5所述的使用手势对移动终端进行操作的方法，其特征在于，所述步骤A)在满足如下条件的情况调用：

存在需要所述移动终端做出响应的请求，且所述移动终端在设定时间未响应。

7.一种实现如权利要求1所述使用手势对移动终端进行操作方法的装置，其特征在于，包括：

稳定姿态判断模块：用于判断移动终端是否处于稳定的姿态，如是，调用传感器控制模块；否则，退出本次操作；

传感器控制模块：用于使能设置在所述移动终端设定位置上的传感器，判断在以所述移动终端为参考点的设定方向上是否存在物体，如是，调用摄像头控制模块；否则，返回稳定姿态判断模块；

摄像头控制模块：用于使能设置在所述移动终端指定位置上的摄像头，取得在所述物体的形状数据，判断是否有物体稳定在以所述移动终端为参考点的设定方向上，如是，调用手势分析模块；否则，返回位置状态判断模块；

手势分析模块：用于对所述取得的物体形状进行运算和分析，得到其代表的手势，并执行该手势对应的操作。

8.根据权利要求7所述的装置，其特征在于，所述摄像头控制模块中进一步包括：

灰度队列形成单元：用于将所述摄像头取得的RGB图像转换灰度图像，并将其放入一循环队列中；

物体判断单元：用于计算所述队列中多帧灰度图像的像素方差，并将其与设定阈值比较，如小于设定阈值，则判断为有物体稳定在以所述移动终端为参考点的设定方向上；否则，判断为无物体稳定在以所述移动终端为参考点的设定方向上。

9.根据权利要求8所述的装置，其特征在于，所述手势分析模块进一步包括：

手势识别单元：用于将得到的灰度图像输入到完成训练的卷积神经网络进行手势识别，得到其表示的手势；

手势执行单元：用于查找所述手势表示的操作内容并在所述移动终端上执行该操作。

10.根据权利要求9所述的装置，其特征在于，还包括调用判断模块，所述调用判断模块用于在存在需要所述移动终端做出响应的请求，且所述移动终端在设定时间未响应时，调用所述位置状态判断模块。