[发明专利]一种手部追踪方法及装置

说明书

本发明的方面涉及本发明涉及手势识别技术领域，特别是涉及一种手部追踪方法及装置。手部追踪方法包括：获取视频帧步骤，获取连续的视频帧；判断步骤，根据前一视频帧中是否有手部图像的标注，判断前一视频帧中是否检测到手部图像；单尺度局部检测步骤，根据前一视频帧中有手部图像，对当前视频帧的局部范围进行手部检测，并标注手部图像在当前视频帧中的位置；多尺度全局检测步骤，根据前一视频帧中不具有手部图像，对当前视频帧全图范围进行手部检测，并标注手部图像在当前视频帧中的位置。通过使用两种检测方式检测视频中的手部位置并进行标注，用于追踪手部图像连续的运动轨迹，有助于提高手部追踪效率，降低手部检测难度和实时运行的难度。

技术领域

本发明一般地涉及手势识别技术领域，特别是涉及一种手部追踪方法及装置。

背景技术

手势识别是不借助触摸屏等机械设备的无触人机交互的支柱技术，人们可以使用简单的手势来控制或与设备交互，让计算机理解人类的行为，是人机交互方式中的重要研究方向之一。

然而手部位置的不断确定即手部追踪正是手势识别中最困难也是最耗时的环节。区别于通用物体检测和追踪，手势识别中手部追踪的难度主要体现在三个方面：第一方面，手部的形变度高，检测难度大；第二方面，手部在摄像头视野中的移动速度快，追踪难度大；第三方面，计算资源受限，数据运行难度大。

发明内容

为了解决现有技术中存在的上述问题，本发明提供一种手部追踪方法及装置。

第一方面，本发明实施例提供一种手部追踪方法，其中，包括：获取视频帧步骤，获取连续的视频帧，包括前一视频帧和当前视频帧；判断步骤，根据前一视频帧中是否有手部图像的标注，判断前一视频帧中是否检测到手部图像；单尺度局部检测步骤，当判断前一视频帧中具有手部图像，则通过单尺度局部检测对当前视频帧的局部范围进行手部检测，并在当前视频帧中标注检测到的一个或多个手部图像在当前视频帧中的位置；多尺度全局检测步骤，当判断前一视频帧中不具有手部图像，则通过多尺度全局检测对当前视频帧全图范围进行手部检测，并在当前视频帧中标注检测到的一个或多个手部图像在当前视频帧中的位置。

在一实施例中，手部追踪方法还包括：选择主体手部图像步骤，基于单尺度局部检测步骤或多尺度全局检测步骤检测到的一个或多个手部图像，选择其中一个手部图像作为主体手部图像，并删除其余手部图像的标注。

在另一实施例中，选择主体手部图像步骤还包括：根据多个手部图像在当前视频帧中的面积大小，选择面积最大的手部图像作为主体手部图像。

在又一实施例中，选择主体手部图像步骤还包括：选择视频帧中与预设手势匹配相同的手部图像作为主体手部图像。

在一实施例中，手部追踪方法还包括：手部识别步骤，基于当前视频帧中的一个或多个手部图像，判断手部图像是否为真实的手，如判断为不是真实的手，则删除手部图像的标注。

在一实施例中，手部识别步骤还包括：根据手部图像的位置，对当前视频帧进行截取，得到截取图像，对截取图像缩放至一固定的识别尺寸范围内进行判断。

在一实施例中，单尺度局部检测步骤还包括：基于前一视频帧中手部图像的位置，对当前视频帧进行扩大截取，获取局部范围的局部图像，在局部图像中进行手部检测。

在另一实施例中，单尺度局部检测步骤还包括：对局部图像进行缩放至一固定的检测尺寸范围内进行手部检测。