[发明专利]基于手势的人机交互方法及系统

权利要求书

1.一种基于手势的人机交互方法，其特征在于，包括：

获取用户的视频流中的图片；

获取前景中三个或三个以上预设的色块的坐标；

根据第一色块的坐标模拟鼠标的移动，并根据其他色块的坐标模拟鼠标的点击操作。

2.根据权利要求1所述的基于手势的人机交互方法，其特征在于，所述获取用户的视频流，并获取视频流中的图片包括：

通过摄像头获取用户的视频流，并提取视频流中的连续图片；或间隔一预设值提取视频流中的断续图片。

3.根据权利要求2所述的基于手势的人机交互方法，其特征在于，所述获取前景中三个或三个以上预设的色块的坐标包括：

建立背景模型，以生成掩码图像，并通过掩码图像去除所述图片的背景；

获取预设置的第一色块、第二色块、第三色块模板，并所述图片生成所述每一色块的直方图；

根据所述每一色块的直方图计算每一色块的概率分布图；

获取所述概率分布图中所述每一色块的质心，以获取所述三个色块的坐标。

4.根据权利要求3所述的基于手势的人机交互方法，其特征在于，所述根据其他色块的坐标模拟鼠标的点击操作包括：

获取所述第二色块与第三色块坐标之间的直线距离；判断所述直线距离是否小于预设阈值，如果是则模拟所述鼠标左键被按下；如果否则模拟所述鼠标左键被松开。

5.根据权利要求4所述的基于手势的人机交互方法，其特征在于，所述获取预设置的三个色块模板包括：

在手指上套接三个不同颜色的指套，并将所述指套的颜色作为色块模板进行存储。

6.一种基于手势的人机交互系统，其特征在于，包括：

获取模块，用于获取用户的视频流中的图片；

定位模块，用于获取前景中三个或三个以上预设的色块的坐标；

转换模块，用于根据第一色块的坐标模拟鼠标的移动，并根据其他色块的坐标模拟鼠标的点击操作。

7.根据权利要求6所述的基于手势的人机交互系统，其特征在于，所述获取模块通过摄像头获取用户的视频流，并提取视频流中的连续图片；或间隔一预设值提取视频流中的断续图片。

8.根据权利要求7所述的基于手势的人机交互系统，其特征在于，所述定位模块包括：

背景分割单元，用于建立背景模型，以生成掩码图像，并通过掩码图像去除所述图片的背景；

直方图单元，用于获取预设置的第一色块、第二色块、第三色块模板，并所述图片生成所述每一色块的直方图；

概率分布图单元，用于根据所述每一色块的直方图计算每一色块的概率分布图；

色块定位单元，用于获取所述概率分布图中所述每一色块的质心，以获取所述三个色块的坐标。

9.根据权利要求8所述的基于手势的人机交互系统，其特征在于，所述转换模块用于获取所述第二色块与第三色块坐标之间的直线距离；判断所述直线距离是否小于预设阈值，如果是则模拟所述鼠标左键被按下；如果否则模拟所述鼠标左键被松开。

10.根据权利要求9所述的基于手势的人机交互系统，其特征在于，还包括：

设置于手指上的三个不同颜色的指套，并将所述指套的颜色作为色块模板进行存储。