[发明专利]骨骼检测装置及其使用方法、训练方法和训练装置

说明书

本公开披露了一种骨骼检测装置及其使用方法、训练方法和训练装置。所述骨骼检测装置包括：运动描述符提取模块，用于接收图像序列和获取图像序列中的运动物体的运动信息，所述运动物体具有关节结构和骨骼，所述关节结构用于连接所述骨骼；运动特征提取模块，用于接收所述运动物体的运动信息和从所述运动物体的运动信息中获得所述运动物体的运动特征；骨骼检测模块，用于接收所述运动物体的运动特征和从所述运动物体的运动特征中确定所述图像序列中的属于所述运动物体的骨骼的像素点。

技术领域

本公开涉及姿态识别技术领域，尤其涉及骨骼检测装置及其使用方法、训练方法和训练装置。

背景技术

从图像序列(如视频图像)中估计运动物体的姿态，一直是计算机图形学和视觉领域的一个长期问题。对于具有骨骼结构的运动物体而言，可以通过分割出运动物体的骨骼结构而实现运动物体的姿态估计。

现有的骨骼检测方法通常需要从图像中提取连接骨骼的关节结构的静态图像特征。这种方法需要依赖先验知识且泛用性不强。

发明内容

有鉴于此，本公开提供一种骨骼检测装置及其使用方法、训练方法和训练装置，以避免先验知识的依赖性且泛用性更强。

第一方面，提供一种骨骼检测装置，所述装置包括：运动描述符提取模块，用于接收图像序列和获取图像序列中的运动物体的运动信息，所述运动物体具有关节结构和骨骼，所述关节结构用于连接所述骨骼；运动特征提取模块，用于接收所述运动物体的运动信息和从所述运动物体的运动信息中获得所述运动物体的运动特征；骨骼检测模块，用于接收所述运动物体的运动特征和从所述运动物体的运动特征中确定所述图像序列中的属于所述运动物体的骨骼的像素点

第二方面，提供一种骨骼检测装置的训练方法，所述骨骼检测装置包括运动描述符提取模块、运动特征提取模块和骨骼检测模块，所述方法包括：将图像序列输入所述运动描述符提取模块，以获取图像序列中的运动物体的运动信息，所述运动物体具有关节结构和骨骼，所述关节结构用于连接所述骨骼；将所述运动物体的运动信息输入至所述运动特征提取模块，以获得所述运动物体的运动特征；将所述运动物体的运动特征输入至所述骨骼检测模块，以确定所述图像序列中的属于所述运动物体的骨骼的像素点；根据所述图像序列中的属于所述运动物体的骨骼的像素点与所述图像序列中的像素点的标注结果，更新所述运动特征提取模块和所述骨骼检测模块。

第三方面，提供一种基于骨骼检测装置的骨骼检测方法，所述骨骼检测装置包括运动描述符提取模块、运动特征提取模块和骨骼检测模块，所述方法包括：将图像序列输入所述运动描述符提取模块，以获取图像序列中的运动物体的运动信息，所述运动物体具有关节结构和骨骼，所述关节结构用于连接所述骨骼；将所述运动物体的运动信息输入至所述运动特征提取模块，以获得所述运动物体的运动特征；将所述运动物体的运动特征输入至所述骨骼检测模块，以确定所述图像序列中的属于所述运动物体的骨骼的像素点。

第四方面，提供一种骨骼检测装置的训练装置，所述骨骼检测装置包括运动描述符提取模块、运动特征提取模块和骨骼检测模块，所述训练装置包括：获取模块，用于将图像序列输入所述运动描述符提取模块，以获取图像序列中的运动物体的运动信息，所述运动物体具有关节结构和骨骼，所述关节结构用于连接所述骨骼；第一输入模块，用于将所述运动物体的运动信息输入至所述运动特征提取模块，以获得所述运动物体的运动特征；第二输入模块，用于将所述运动物体的运动特征输入至所述骨骼检测模块，以确定所述图像序列中的属于所述运动物体的骨骼的像素点；更新模块，用于根据所述图像序列中的属于所述运动物体的骨骼的像素点与所述图像序列中的像素点的标注结果，更新所述运动特征提取模块和所述骨骼检测模块。

第五方面，提供一种骨骼检测装置，包括存储器和处理器，所述存储器中存储有可执行代码，所述处理器被配置为执行所述可执行代码，以实现如第二方面或第三方面所述的方法。

第六方面，提供一种计算机可读存储介质，其上存储有可执行代码，当所述可执行代码被执行时，能够实现如第二方面或第三方面所述的方法。