[发明专利]跟踪指蹼位置的方法及其装置

说明书

本发明公开了一种跟踪指蹼位置的方法，包括：获取记录用户手部的同一影像的深度图像和彩色图像；从所述深度图像中提取所述手部的外轮廓；从所述外轮廓的相邻指尖之间的轮廓点中，选取距离连接所述相邻指尖的直线最远的轮廓点作为轮廓拐点；以所述轮廓拐点作为指蹼的当前位置，利用所述彩色图像对所述指蹼的当前位置进行迭代修正，获得所述指蹼的输出位置。采用本发明实施例，能准确地从图像数据中跟踪到指蹼的位置信息。

技术领域

本发明涉及图像技术处理领域，尤其涉及一种跟踪指蹼位置的方法及其装置。

背景技术

指蹼是指在掌骨头处，掌腱膜深层的横行纤维与其向远端发出的四束纵行纤维之间所围成的三个纤维间隙，是手掌、手背与手指的掌、背侧之间的通道。而在虚拟戒指试戴或其他需要跟踪用户的手部指蹼位置信息的应用场景中，难以通过摄像头拍摄的图像数据准确地提取出指蹼的位置信息。

发明内容

本发明实施例提出一种提取指蹼位置的方法，能准确地从图像数据中跟踪到指蹼的位置信息。

第一方面，本发明实施例提供一种跟踪指蹼位置的方法，包括：

获取记录用户手部的同一影像的深度图像和彩色图像；

从所述深度图像中提取所述手部的外轮廓；

从所述外轮廓的相邻指尖之间的轮廓点中，选取距离连接所述相邻指尖的直线最远的轮廓点作为轮廓拐点；

以所述轮廓拐点作为指蹼的当前位置，利用所述彩色图像对所述指蹼的当前位置进行迭代修正，获得所述指蹼的输出位置。

结合第一方面，在第一方面的第一种可能的实现方式中，所述从所述深度图像中提取所述手部的外轮廓，具体为：

根据预设的手部关节点模型，从所述深度图像中计算出所述手部的每一个关节点的深度；

取所述有关节点的深度的中值作为参考深度d_ref；

从所述深度图像中提取深度在手部深度范围[d_ref-δ,d_ref+δ]内的区域的外轮廓；其中，δ为衡量所述手部的手背与手掌之间厚度的参数值；

从所述外轮廓中选取轮廓的质心距离所述关节点的平均距离最近，且轮廓曲线总长度最长的外轮廓作为所述手部的外轮廓。

结合第一方面，在第一方面的第二种可能的实现方式中，所述以所述轮廓拐点为指蹼的当前位置，利用所述手部的彩色图像对所述指蹼的当前位置进行迭代修正，获得所述指蹼的输出位置，具体为：

以所述轮廓拐点为指蹼的当前位置，从所述手部的彩色图像中提取以所述当前位置为中心点的局部区域；

将所述当前位置进行偏移获得多个偏移位置，并对于每一个偏移位置，从所述手部的彩色图像中提取以该偏移位置为中心点且与所述局部区域相同形状的区域作为候选区域；

计算每一个所述候选区域与所述局部区域的结构偏差程度；

若每一个所述候选区域与所述局部区域的结构偏差程度均大于预设阈值，则将所述当前位置作为所述指蹼的输出位置；

若存在一个所述候选区域与所述局部区域的结构偏差程度不大于所述预设阈值时，则选取与所述局部区域的结构偏差程度最小的候选区域所对应的偏移位置来更新所述当前位置，并更新所述局部区域和所述候选区域。