[发明专利]一种手势轨迹的识别方法和装置

说明书

本申请涉及一种手势轨迹的识别方法和装置，其中，该方法包括：通过目标关键点检测模型检测视频中的手势关键点的坐标，得到第一长度的坐标序列，其中，第一长度的坐标序列用于指示视频中所展示的手部的手势轨迹，目标关键点检测模型是使用关键点检测样本对初始关键点检测模型进行训练得到的，关键点检测样本是标注了手势关键点对应坐标的样本图像；将第一长度的坐标序列与第二长度的模板坐标序列进行匹配，其中，第二长度的模板坐标序列用于指示目标手势轨迹；在第一长度的坐标序列与第二长度的模板坐标序列匹配成功的情况下，确定在视频中识别出目标手势轨迹。本申请解决了手势轨迹的识别准确度较低的技术问题。

技术领域

本申请涉及计算机领域，尤其涉及一种手势轨迹的识别方法和装置。

背景技术

当前的手势识别主要集中在手势类别分类和手势位置检测，这些都是针对静态的手势识别。目前的手势识别方式对手势轨迹的识别效率较低，识别准确度无法达到要求。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本申请提供了一种手势轨迹的识别方法和装置。

根据本申请实施例的一个方面，提供了一种手势轨迹的识别方法，包括：

通过目标关键点检测模型检测视频中的手势关键点的坐标，得到第一长度的坐标序列，其中，所述第一长度的坐标序列用于指示所述视频中所展示的手部的手势轨迹，所述目标关键点检测模型是使用关键点检测样本对初始关键点检测模型进行训练得到的，所述关键点检测样本是标注了所述手势关键点对应坐标的样本图像；

将所述第一长度的坐标序列与第二长度的模板坐标序列进行匹配，其中，所述第二长度的模板坐标序列用于指示目标手势轨迹；

在所述第一长度的坐标序列与第二长度的模板坐标序列匹配成功的情况下，确定在所述视频中识别出所述目标手势轨迹。

可选地，通过所述目标关键点检测模型检测视频中的手势关键点的坐标，得到所述第一长度的坐标序列包括：

检测所述视频上的手势区域，其中，所述手势区域是所述视频中所展示的手部所在的区域；

通过所述目标关键点检测模型检测所述手势区域中的手势关键点的坐标，得到所述第一长度的坐标序列。

可选地，所述手势关键点包括多个关键点，其中，通过所述目标关键点检测模型检测视频中的手势关键点的坐标，得到所述第一长度的坐标序列包括：

将所述视频中的多个关键帧输入所述目标关键点检测模型；

获取所述目标关键点检测模型输出的所述多个关键帧中每个关键帧对应的关键点坐标集合，得到具有对应关系的多个关键帧和多个关键点坐标集合，其中，每个关键点坐标集合中包括所述多个关键点在所述每个关键帧上的坐标值，所述多个关键点中每个关键点对应的关键点坐标在所述每个关键点坐标集合中的位置与所述每个关键点在所述视频中所包括的手部上的位置对应；

将所述多个关键点坐标集合按照所述多个关键帧的时间顺序排列得到的关键点坐标集合序列确定为所述第一长度的坐标序列。

可选地，在将所述视频中的多个关键帧输入所述目标关键点检测模型之前，所述方法还包括：

将所述关键点检测样本输入所述初始关键点检测模型，得到所述初始关键点检测模型输出的检测结果；

根据所述检测结果与所述关键点检测样本所标注的多个手势关键点对应坐标确定目标损失函数的值，其中，所述目标损失函数是所述初始关键点检测模型所对应的损失函数；