[发明专利]一种基于手势识别的人机交互方法和装置

说明书

技术领域

本发明涉及人机交互领域，特别涉及一种基于手势识别的人机交互方法和装置。

背景技术

传统的人机交互手段已不能随着技术的发展而满足用户的需求，例如在虚拟现实和增强现实场景下，用户很难再通过点击实体按键、操作输入设备点击菜单等传统方式完成人机交互，因而使得在虚拟现实和增强现实场景下，用户完成菜单的显示、隐藏等操作十分不便。

发明内容

鉴于现有技术中人机交互不便利的问题，提出了本发明的基于手势识别的人机交互方法和装置，以便解决或至少部分地解决上述问题。

依据本发明的一个方面，提供了一种基于手势识别的人机交互方法，所述人机交互为虚拟现实系统或增强现实系统中的人机交互，该方法包括：

响应于启动手势识别功能的请求，打开所述虚拟现实系统或所述增强现实系统中的图像采集设备；

接收通过所述图像采集设备实时采集的用户手势图像；

根据预设的手势识别算法对所述采集的用户手势图像进行识别，判断所述用户手势图像中的手势是否与预设的手势操作列表中的任一个手势相匹配；所述预设的手势操作列表中记录有一个或多个手势，以及各手势对应的菜单相关操作；

如果匹配，则在所述虚拟现实系统或所述增强现实系统中执行与该手势对应的菜单相关操作。

依据本发明的另一方面，提供了一种基于手势识别的人机交互装置，所述人机交互为虚拟现实系统或增强现实系统中的人机交互，该装置包括：

图像采集设备控制单元，用于响应于启动手势识别功能的请求，打开所述虚拟现实系统或所述增强现实系统中的图像采集设备；

图像接收单元，用于接收通过所述图像采集设备实时采集的用户手势图像；

图像识别单元，用于根据预设的手势识别算法对所述采集的用户手势图像进行识别，判断所述用户手势图像中的手势是否与预设的手势操作列表中的任一个手势相匹配；所述预设的手势操作列表中记录有一个或多个手势，以及各手势对应的菜单相关操作；

执行单元，用于在所述图像识别单元判断所述用户手势图像中的手势与预设的手势操作列表中的任一个手势相匹配时，在所述虚拟现实系统或所述增强现实系统中执行与该手势对应的菜单相关操作。

综上所述，本发明的技术方案，在用户启动手势识别功能后，通过打开虚拟现实系统或增强现实系统中的图像采集设备来获取用户的手势图像，通过预设的算法识别出手势并判断是否是预设的手势操作列表中的一个手势，是则执行与该手势对应的菜单相关操作，例如显示/隐藏菜单等。该技术方案使得用户不需要用户实际或模拟点击按钮或菜单，仅仅通过做出不同手势即可完成不同的操作，实现了简单方便而不混淆的人机交互。

附图说明

图1为本发明一个实施例提供的一种基于手势识别的人机交互方法的流程示意图；

图2示出了手势操作的图像提示信息的示意图；

图3示出了根据本发明一个实施例的另一种基于手势识别的人机交互方法的流程示意图；

图4为本发明一个实施例提供的一种基于手势识别的人机交互装置的结构示意图。

具体实施方式

本发明的设计思路是：通过识别用户的不同手势，以及建立手势与操作的对应关系，使得在虚拟现实场景或增强现实场景下的人机交互更为方便。

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

图1示出了根据本发明一个实施例的一种基于手势识别的人机交互方法的流程示意图，其中人机交互为虚拟现实系统或增强现实系统中的人机交互，如图1所示，该方法包括：

步骤S110，响应于启动手势识别功能的请求，打开虚拟现实系统或增强现实系统中的图像采集设备。

例如，图像采集设备可以是虚拟现实头盔上的camera(摄像机)，也可以是运行了增强现实程序的手机上的摄像头，等等。

步骤S120，接收通过图像采集设备实时采集的用户手势图像。

步骤S130，根据预设的手势识别算法对采集的用户手势图像进行识别，判断用户手势图像中的手势是否与预设的手势操作列表中的任一个手势相匹配；预设的手势操作列表中记录有一个或多个手势，以及各手势对应的菜单相关操作。

步骤S140，如果匹配，则在虚拟现实系统或增强现实系统中执行与该手势对应的菜单相关操作。