[发明专利]一种人体和人手的关联方法、装置、设备及存储介质

权利要求书

1.一种人体和人手的关联方法，包括：

在画面内容包括待关联人体和待关联人手的待检测图像中，确定所述待关联人体的人体检测框和所述待关联人手的人手检测框之间的第一关联概率；

基于所述人体检测框内的关键点，确定所述待关联人体和所述关键点中的手腕关键点之间的第二关联概率；其中，所述人体检测框内的关键点包括：属于同一手臂的手腕关键点和手肘关键点；

基于所述属于同一手臂的手腕关键点和手肘关键点，确定所述人手检测框与所述手腕关键点之间的第三关联概率；

基于所述第一关联概率、所述第二关联概率和所述第三关联概率，确定所述待关联人体和所述待关联人手之间的关联度。

2.根据权利要求1所述的方法，其中，所述在画面内容包括待关联人体和待关联人手的待检测图像中，确定所述待关联人体的人体检测框和所述待关联人手的人手检测框之间的第一关联概率，包括：

确定所述人体检测框的人体特征和所述人手检测框的人手特征；

基于所述人体特征和所述人手特征，确定所述人体检测框和所述人手检测框之间的第一关联概率。

3.根据权利要求1或2所述的方法，其中，所述基于所述人体检测框内的关键点，确定所述待关联人体和所述关键点中的手腕关键点之间的第二关联概率，包括：

确定所述手腕关键点为真值点的置信度；

基于所述置信度，确定所述待关联人体和所述手腕关键点之间的关联概率，得到所述第二关联概率。

4.根据权利要求3所述的方法，其中，所述基于所述置信度，确定所述待关联人体和所述手腕关键点之间的关联概率，得到所述第二关联概率，包括：

将所述置信度确定为所述第二关联概率。

5.根据权利要求1至4任一项所述的方法，其中，所述基于所述属于同一手臂的手腕关键点和手肘关键点，确定所述人手检测框与所述手腕关键点之间的第三关联概率，包括：

基于所述属于同一手臂的手腕关键点和手肘关键点，确定所述手腕关键点与所述人手检测框之间的位置关系；

基于所述位置关系和所述手腕关键点对应的置信度，确定所述第三关联概率，其中，所述手腕关键点对应的置信度包括所述手腕关键点为真值点的置信度。

6.根据权利要求5所述的方法，其中，所述基于所述属于同一手臂的手腕关键点和手肘关键点，确定所述手腕关键点与所述人手检测框之间的位置关系，包括：

确定连接属于同一手臂的所述手腕关键点和所述手肘关键点的第一连线；

确定连接所述手腕关键点与所述人手检测框内的预设点的第二连线；

以所述手腕关键点为顶点、沿所述手臂的小臂方向，确定所述第一连线和所述第二连线之间的夹角，得到所述位置关系。

7.根据权利要求6所述的方法，其中，所述基于所述位置关系和所述手腕关键点对应的置信度，确定所述第三关联概率，包括：

在所述夹角小于预设角度阈值的情况下，确定所述手腕关键点与所述人手检测框内的预设点之间的距离；

基于所述夹角、所述距离和所述手腕关键点对应的置信度，确定所述第三关联概率。

8.根据权利要求7所述的方法，其中，所述基于所述夹角、所述距离和所述手腕关键点对应的置信度，确定所述第三关联概率，包括：

基于所述距离与预设长度阈值之间的第一差值，确定所述距离的第一置信度；

基于所述夹角与所述预设角度阈值之间的第二差值，确定所述夹角的第二置信度；

对所述第一置信度、所述第二置信度和所述手腕关键点对应的置信度进行融合，得到所述第三关联概率。

9.根据权利要求1至8任一项所述的方法，其中，所述基于所述第一关联概率、所述第二关联概率和所述第三关联概率，确定所述待关联人体和所述待关联人手之间的关联度，包括：

基于所述第二关联概率和所述第三关联概率，对所述第一关联概率进行修正，得到已修正第一概率；

基于所述已修正第一概率，确定所述待关联人体和所述待关联人手之间的关联度。