[发明专利]手势识别方法及系统、计算机设备及存储介质

说明书

本发明公开了一种手势识别方法及系统、计算机设备及存储介质，其包括如下步骤：得到拍摄影像中当前帧图片中所有的人脸边界框和手势边界框；根据所述人脸边界框的位置信息更新人脸轨迹列表；若所述人脸轨迹列表存在有效人脸轨迹，根据预设绑定规则将当前帧图片的手势边界框与有效人脸轨迹的当前帧图片的人脸边界框进行绑定；获取所述有效人脸轨迹中的有效手势类别。本发明通过人脸与手势一起联合识别的方式，可以有效防止用户在不知情或其他动作姿态下误触发手势动作对应的控制指令；同时将人脸轨迹与手势边界框匹配绑定，借助于人脸的强识别性，能可靠地识别手势动作，提高了手势识别的准确性，也提高了用户使用体验。

技术领域

本发明涉及摄像技术领域，尤其是涉及一种手势识别方法及系统、计算机设备及存储介质。

背景技术

手势识别使人们能够与设备进行通信，并且无需任何机械设备即可自然交互。手势识别作为人机交互的重要组成部分，其研究发展影响着人机交互的自然性和灵活性。目前大多数研究者均将注意力集中在手势的最终识别方面，通常会将手势背景简化，并在单一背景下利用所研究的算法将手势进行分割，然后采用常用的识别方法将手势表达的含义通过系统分析出来。但在现实应用中，手势通常处于复杂的环境下。

在二维图像中手势识别技术多采用基于计算机视觉的模板匹配方法来对捕获的手势图像进行识别，其过程主要步骤包括：1.采用摄像头获取图像；2.对手势进行检测，获取手势所在的区域；3.对手势区域进行识别，获取其手势类别，此过程一般采用模板匹配技术；4.如果识别为有效的手势，则进行相应的操作，如果不是，则忽略，继续循环执行。

上述技术在实际复杂的人机交互环境中会遇到一些问题，例如：1.可能在用户非主观意图下误触发手势；2.无法处理多人场景下的手势交互任务；3.难以在动态行为中可靠的识别用户手势。

发明内容

基于此，有必要针对现有技术的不足，提供一种手势识别方法及系统、计算机设备及存储介质，通过人脸与手势一起联合识别的方式，能可靠地识别手势动作，提高手势识别的准确性及用户使用体验。

为解决上述技术问题，本发明采用以下技术方案：

本发明提供了一种手势识别方法，其包括如下步骤：

A、实时检测拍摄影像中的人脸和手势，得到拍摄影像中当前帧图片中所有的人脸边界框和手势边界框；

B、根据所述人脸边界框的位置信息更新人脸轨迹列表；

C、若所述人脸轨迹列表中存在有效人脸轨迹，根据预设绑定规则将当前帧图片的手势边界框与有效人脸轨迹的当前帧图片的人脸边界框进行绑定；

D、识别当前帧图片中与有效人脸轨迹匹配的手势边界框的手势类别，获取所述有效人脸轨迹中的有效手势类别。

第二方面，本发明提供了一种手势识别系统，其包括：

检测模块，用于实时检测拍摄影像中的人脸和手势，得到拍摄影像中当前帧图片中所有的人脸边界框和手势边界框；

人脸轨迹模块，用于根据所述人脸边界框的位置信息更新人脸轨迹列表；

轨迹判断模块，用于判断所述人脸轨迹列表是否存在有效人脸轨迹；

手势绑定模块，用于根据预设绑定规则将当前帧图片的手势边界框与有效人脸轨迹的当前帧图片的人脸边界框进行绑定；

手势识别处理模块，用于识别当前帧图片中与有效人脸轨迹匹配的手势边界框的手势类别，获取所述有效人脸轨迹中的有效手势类别。

第三方面，本发明提供了一种计算机设备，其包括存储器及处理器；所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现上述的手势识别方法。