[发明专利]一种通过手形与移动终端进行交互的方法及装置

说明书

技术领域

本发明涉及移动终端交互领域，特别涉及一种通过手形与移动终端进行交互的方法及装置。

背景技术

目前与移动终端的交互一般需要触摸移动终端上的物理介质进行，如：触摸屏，按键，笔等，或者通过语音进行输入。当使用触摸屏或触摸板等输入时，必须通过笔或手指接触屏幕，如果触摸屏损坏，则就不能进行输入操作，使交互受限。当使用语音输入时，移动终端通过识别人的声音进行识别。这时必须发出声音，而且需要人与移动终端的距离要很近，周围不能嘈杂，否则识别不出来。此外，考虑到语种与方言等情况，则现有的识别通用性差，识别成功率比较低，误操作概率大，用户体验不好。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述在触摸屏损坏时不能进行输入操作、识别率较低、用户体验不好的缺陷，提供一种在触摸屏损坏时能进行输入操作、识别率较高、用户体验较好的通过手形与移动终端进行交互的方法及装置。

本发明解决其技术问题所采用的技术方案是：构造一种通过手形与移动终端进行交互的方法，所述移动终端设有图像采集器，所述方法包括如下步骤：

A）判断所述移动终端上是否打开手形输入功能，如是，执行步骤B）；否则，采用声音或触摸方式输入；

B）判断所述图像采集器是否采集到手形图像，如是，执行步骤C）；否则，继续进行本步骤的判断；

C）对所述手形图像进行解析得到对应的手形特征信息；

D）将所述手形特征信息与数据库中预定义的手形逐一进行匹配，并判断是否匹配成功，如是，执行所述手形所对应的终端操作指令；否则，显示匹配失败。

在本发明所述的通过手形与移动终端进行交互的方法中，在所述步骤A）之前还包括预处理步骤：

A0）注册手形，并将手形特征信息和所对应的终端操作指令事先保存到所述数据库中。

在本发明所述的通过手形与移动终端进行交互的方法中，所述图像采集器为红外摄像装置；所述步骤B）进一步包括：

B1）判断所述移动终端是否处在待机状态，如是，每隔第一设定时间开启所述图像采集器进行采集手形图像，并执行步骤B3)；否则，执行步骤B2）；

B2）每隔第二设定时间开启所述图像采集器进行采集手形图像；所述第二设定时间小于所述第一设定时间；

B3）判断是否采集到所述手形图像，如是，使所述图像采集器进入休眠后状态或保持当前状态，否则，等待设定时间后继续进行本步骤的判断。

在本发明所述的通过手形与移动终端进行交互的方法中，所述步骤A0）进一步包括：

A01）所述图像采集器通过拍摄手形获取手形图像；

A02）对所述手形图像进行处理以取得完整的手形轮廓；

A03）提示用户选择所述手形轮廓需要对应的终端操作指令；

A04）用户选择对应的终端操作指令后，将所述手形轮廓与选择的终端操作指令保存到数据库中，同时记录本次注册时手与所述图像采集器之间的注册距离并将其保存到所述数据库中。

在本发明所述的通过手形与移动终端进行交互的方法中，所述步骤C）进一步包括：

C1）对所述手形图像进行灰度化，去掉所述手形图像中不需要的信息；

C2）使用边缘算法获取手形的闭合路径，并将所述闭合路径上的点的坐标记录保存作为当前手形轮廓；

C3）记录手与所述图像采集器之间的当前距离。

在本发明所述的通过手形与移动终端进行交互的方法中，所述步骤D）进一步包括：

 D1）判断所述当前距离与所述数据库中保存的注册距离是否相同，如是，将当前手形轮廓与所述数据库中的手形轮廓进行匹配，得到其轮廓数据的相似度，执行步骤D3）；否则，执行步骤D2）；

D2）对当前手形轮廓进行三维换算后返回步骤D1）；

D3）判断所述相似度是否在预先设定的阈值范围内，如是，取出注册的终端操作指令并执行；否则，执行步骤D4）；

D4）判断所述数据库中的手形是否已经遍历，如是，匹配失败；否则，获取下一个已注册的手形进行匹配，并返回步骤D1）。

本发明涉及一种实现上述通过手形与移动终端进行交互的方法的装置，所述移动终端设有图像采集器，所述装置包括：

手形注册单元：用于注册手形，并将手形特征信息和所对应的终端操作指令事先保存到数据库中；

 手形输入功能判断单元：用于判断所述移动终端上是否打开手形输入功能，并在未打开时采用声音或触摸方式输入；