[发明专利]指尖关键点检测方法、装置、设备和可读存储介质

权利要求书

1.一种指尖关键点检测方法，其特征在于，包括：

获取待检测图像中的人手区域；

对所述人手区域进行手势检测，得到所述人手区域的手势类别；

响应于所述手势类别为指尖触发类别，输出对所述人手区域进行人手关键点检测得到的、与所述指尖触发类别对应的指尖关键点的位置信息，其中，所述人手关键点包括：指尖关键点，以及与所述指尖关键点位于同一目标手指上的至少一个关键点；

根据所述人手关键点的位置信息，对所述人手关键点进行拟合，得到线条，根据所述线条在所述指尖关键点一侧的延伸方向，确定所述目标手指的指向；

根据所述目标手指的指向、设定长度和所述指尖关键点的位置信息，确定所述指尖关键点所指的位置；

对所述人手区域进行手势检测，得到所述人手区域的手势类别，包括：

通过手势分类模型对所述人手区域进行手势检测，得到所述人手区域属于指尖触发类别；并且通过人手关键点检测模型对所述人手区域进行人手关键点检测，得到人手关键点的位置信息；响应于所述指尖触发类别的检测精度和所述人手关键点的位置信息的检测精度满足设定要求，确定所述人手区域属于指尖触发类别。

2.根据权利要求1所述的方法，其特征在于，所述响应于所述手势类别为指尖触发类别，输出对所述人手区域进行人手关键点检测得到的、与所述指尖触发类别对应的指尖关键点的位置信息，包括：

响应于所述手势类别为指尖触发类别，获取通过人手关键点检测模型对所述人手区域进行人手关键点检测得到的人手关键点的位置信息；

根据所述人手关键点之间的位置关系，从所述人手关键点的位置信息中筛选与所述指尖触发类别对应的指尖关键点的位置信息。

3.根据权利要求1所述的方法，其特征在于，在所述响应于所述指尖触发类别的检测精度和所述人手关键点的位置信息的检测精度满足设定要求，确定所述人手区域属于指尖触发类别之前，还包括：

根据所述指尖触发类别的置信度和所述人手关键点的位置信息的置信度，计算综合检测精度；

响应于所述综合检测精度大于设定阈值，确定所述指尖触发类别的检测精度和所述人手关键点的位置信息的检测精度满足设定要求。

4.根据权利要求1所述的方法，其特征在于，在所述响应于所述指尖触发类别的检测精度和所述人手关键点的位置信息的检测精度满足设定要求，确定所述人手区域属于指尖触发类别之前，还包括：

响应于所述指尖触发类别的置信度和所述人手关键点的位置信息的置信度均大于设定阈值，确定所述指尖触发类别的检测精度和所述人手关键点的位置信息的检测精度满足设定要求。

5.根据权利要求1所述的方法，其特征在于，所述人手关键点还包括形成所述指尖触发类别的手势所需的、除所述目标手指之外的其它手指上的至少一个关键点。

6.根据权利要求1-5任一项所述的方法，其特征在于，在所述对所述人手区域进行手势检测，得到所述人手区域的手势类别之前，还包括：

向用户提供多个指尖触发类别的选项，所述指尖触发类别包括大拇指指尖触发类别、食指指尖触发类别、中指指尖触发类别、无名指指尖触发类别和小指指尖触发类别；

获取用户选择的指尖触发类别的选项，并根据所述指尖触发类别的选项确定指尖触发类别。