[发明专利]一种基于手势的游戏体感控制方法

说明书

技术领域

本发明属于图像处理和人机交互的游戏体感控制领域，尤其涉及一种基于手势的游戏体感控制控制方法。

背景技术

随着游戏的不断发展，人们的目光从游戏本身逐渐向人机交互这一块转变，现在的用户已经不仅仅满足于游戏本身的好坏，而是希望游戏的操作更加有代入感，交互更加方便简洁。

体感游戏的出现则正好满足了人们的这一需要，作为体感游戏控制部分则是至关重要的。摄像头输入作为一个新型的输入方式在体感游戏中被普遍使用，在基于视觉的体感游戏控制中主要涉及颜色形态检测、差帧运动物体检测等图像识别技术。

人机交互是多种媒体、多重模式的交互技术，其更多的强调以用户为中心，使用符合自然交流习惯的计算机控制技术,为用户提供一个自然而有效的人机交流界面。手势检测是一种新型的自然人机交互方式，不同于传统的以机器为中心的人机交互方式。

而基于手势识别的体感游戏主要可以分为两类：利用数据手套等相关设备的系统和徒手系统。基于数据手套等相关设备的操作主要是靠手套内自带的传感器来检测手的动作与手势然后经过发送装置将检测到的信息发送给主机进行游戏。徒手系统不需要用户使用任何辅助工具，是自然的人机交互方式。因此，对徒手手势体感游戏的研究更具有现实意义。徒手体感游戏是体感游戏发展的大方向，并会为体感游戏带来更加广阔的应用前景。

手部的动作捕捉是基于运动目标的检测的基础之上来完成的。只有检测到运动的物体，然后再加以分析是否为手才能进行手势的识别。手势识别一般可以分为：

①手掌的位置和方向；

②手掌的弯曲度，并根据这两个分量的不同组合进行手势的识别；

现在通常进行手势识别的方法主要是先进行三维建模，在三维建模中有两种普遍的建模方法，一种是基于三维手模型的手势模型，一种是基于表现的手势模型。原理上，基于三维手模型的手势模型适合于给所有手势模型建模，而基于表观的手势模型通常只适合用于给一般普遍的手势。然而，基于三维手模型的手势模型不仅参数多，计算复杂度高，而且为抽取模型参数而使用的许多近似过程导致模型参数估计很不可靠，而基于表观的手势模型计算复杂性低，易于达到。因此，目前绝大多数的手势识别系统都是采用表观的手势模型。

手势检测则是一种比较精细的控制方式，在游戏中存储一些简单的手势库和玩家在摄像头前做的手势进行比较，如果与原有手势一样，则执行该手势的操作。因为人类手势比较多也比较复杂，所以一个手可以进行多项操作。但在游戏中比较难于区分人类复杂的手势，所以在现今游戏中运用比较少。

发明内容

本发明的目的是提供一种用低成本的普通摄像头能实现的通过对操作者手部进行检测与跟踪，对操作者的手势动作加以识别从而在游戏中进行人机交互的控制方法。

为了达到上述目的，本发明的技术方案提供了一种基于手势的游戏体感控制方法，其步骤为：

1.视频信号预处理

采集摄像头视频信号，并对信号进行预处理，包括噪声滤除处理，色彩空间的转换等等；

2.肤色的检测

在前一步视频画面经过处理之后，基于肤色对操作者的皮肤区域进行检测；

3.手部的定位

在得到肤色区域的轮廓之后，采用基于面积法的人手区域轮廓检测；

4.手部的运动跟踪

对操作者的手部在画面之中的运动进行跟踪，记录运动轨迹和坐标位置；

5.手部动作的识别

识别操作者的手部动作，区分手的握拳与伸开状态；

6.手势体感控制

根据操作者的手部在摄像头范围内的运动，控制被操作目标的移动；结合操作者的手部动作，控制目标预先定义的动作。

本发明通过图像处理和计算机视觉的技术，检测操作者的手部位置，跟踪手部的运动，并检测操作者的手部动作，从而实现对游戏的操控。使用低成本的普通摄像头，为运动和游戏爱好者提供了一种方便简洁的游戏操控方式。

附图说明

图1是整个基于手势的游戏操控系统基本流程图

图2是对手部的检测和定位

图3是对手部的握拳状态的识别

具体实施方式

通过一个普通的USB摄像头，在不考虑背景和衣服颜色的情况下，被跟踪的目标(操控者的手)必须位于摄像头视野之内，跟踪定位完成后将数据传送到数据处理模块，进行比对分析，排除噪声数据，得到较为鲁棒的数据后作为游戏控制模块的控制参数，对游戏中的角色进行控制。

1.视频信号预处理