[发明专利]一种通过手形与移动终端进行交互的方法及装置

摘要

本发明提出了一种通过手形与移动终端进行交互的方法，移动终端设有图像采集器，所述方法包括如下步骤判断移动终端上是否打开手形输入功能，如是，执行下一步骤；否则，采用声音或触摸方式输入；判断图像采集器是否采集到手形图像，如是，执行下一步骤；否则，继续进行本步骤的判断；对手形图像进行解析得到对应的手形特征信息；将手形特征信息与数据库中预定义的手形逐一进行匹配，并判断是否匹配成功，如是，执行所述手形所对应的终端操作指令；否则，显示匹配失败。本发明还涉及一种实现上述方法的装置。实施本发明的通过手形与移动终端进行交互的方法及装置，具有以下有益效果在触摸屏损坏时能进行输入操作、识别率较高、用户体验较好。

主权项

一种通过手形与移动终端进行交互的方法，其特征在于，所述移动终端设有图像采集器，所述方法包括如下步骤：A)判断所述移动终端上是否打开手形输入功能，如是，执行步骤B)；否则，采用声音或触摸方式输入；B)判断所述图像采集器是否采集到手形图像，如是，执行步骤C)；否则，继续进行本步骤的判断；C)对所述手形图像进行解析得到对应的手形特征信息；D)将所述手形特征信息与数据库中预定义的手形逐一进行匹配，并判断是否匹配成功，如是，执行所述手形所对应的终端操作指令；否则，显示匹配失败；在所述步骤A)之前还包括预处理步骤：A0)注册手形，并将手形特征信息和所对应的终端操作指令事先保存到所述数据库中；如ok手形对应于接通电话，那么当有电话呼入时，只要对着图像采集器做出ok的手形，那么电话就通；或将ok手形对应于打开通讯录，向上的手形对于向上翻页，那么只要对着图像采集器做出ok手形，那么通讯录将会打开，再做出向上的手形，通讯录将会向上翻页；所述步骤A0)进一步包括：A01)所述图像采集器通过拍摄手形获取手形图像；通过图像采集器来获取手形图像，图像采集器在拍摄时是一个手或两个手的手形；在拍摄时手指处于自然张开状态，或处于闭合状态，手掌平面与图像采集器的成像屏幕平行或不平行；A02)对所述手形图像进行处理以取得完整的手形轮廓；A03)提示用户选择所述手形轮廓需要对应的终端操作指令；A04)用户选择对应的终端操作指令后，将所述手形轮廓与选择的终端操作指令保存到数据库中，同时记录本次注册时手与所述图像采集器之间的注册距离并将其保存到所述数据库中；所述步骤C)进一步包括：C1)对所述手形图像进行灰度化，去掉所述手形图像中不需要的信息；C2)使用边缘算法获取手形的闭合路径，并将所述闭合路径上的点的坐标记录保存作为当前手形轮廓；C3)记录手与所述图像采集器之间的当前距离；所述步骤D)进一步包括：D1)判断所述当前距离与所述数据库中保存的注册距离是否相同，如是，将当前手形轮廓与所述数据库中的手形轮廓进行匹配，得到其轮廓数据的相似度，执行步骤D3)；否则，执行步骤D2)；D2)对当前手形轮廓进行三维换算后返回步骤D1)；手与所述图像采集器有一个距离，如果当前距离小于数据库中保存的注册距离，则需要对当前手形轮廓数据进行放大，反之则缩小，缩放后再与已注册的手形数据进行匹配；D3)判断所述相似度是否在预先设定的阈值范围内，如是，取出注册的终端操作指令并执行；否则，执行步骤D4)；D4)判断所述数据库中的手形是否已经遍历，如是，匹配失败；否则，获取下一个已注册的手形进行匹配，并返回步骤D1)。