[发明专利]基于传感器数据分析识别身体关节位置的系统和方法

摘要

提供基于传感器数据分析识别身体关节位置的系统和方法。用于识别身体关节位置的系统和方法包括获得关于用户的骨架数据、深度数据和红色、绿色和蓝色(RGB)数据；使用输入数据获得身体关节位置(BJL)和身体段长度(BSL)的估计值；基于深度数据和RGB数据，在先前获得的BJL周围的有界邻域中迭代地识别可能正确的BJL；比较与可能正确的BJL相关联的身体段长度和参考长度；基于比较来识别候选BJL；通过基于深度数据分割每个身体段的三维(3D)坐标并对每个分割的3D坐标进行分析来确定每个身体段的物理取向。基于与相应身体段的物理取向的方向上的最小偏差以及RGB数据和深度数据的特征描述符来识别校正的BJL。

主权项

一种处理器实现的方法，包括以下步骤：利用一个或多个硬件处理器，以一个或多个时间戳获得一个或多个输入数据，其中，所述一个或多个输入数据包括与至少一个用户有关的骨架数据、深度数据以及红色、绿色和蓝色数据即RGB数据，以及所述一个或多个输入数据包括与一个或多个骨架关节有关的三维坐标即3D坐标；利用所述一个或多个硬件处理器，使用所述一个或多个输入数据来估计第一组帧中的一个或多个身体关节位置和连接到相应的骨架关节的一个或多个身体段的身体段长度，以获得一个或多个身体关节位置的估计值和一个或多个身体段长度的估计值；利用所述一个或多个硬件处理器，在先前获得的一个或多个身体关节位置周围的有界邻域中，迭代地识别一个或多个可能正确的身体关节位置，其中，所述一个或多个可能正确的身体关节位置是基于所述深度数据和所述RGB数据而迭代识别出的；利用所述一个或多个硬件处理器，进行参考长度和与所述一个或多个可能正确的身体关节位置中的各个可能正确的身体关节位置相关联的身体段长度的比较；利用所述一个或多个硬件处理器，基于所述比较，至少将所述一个或多个可能正确的身体关节位置的子集识别为一个或多个候选身体关节位置；通过基于所述深度数据分割各个身体段的一个或多个3D坐标并且对各个分割后的3D坐标进行分析，来确定与所述一个或多个候选身体关节位置中的各个候选身体关节位置有关的各个身体段的物理取向；以及基于相对于相应的身体段的物理取向的方向上的最小偏差以及所述RGB数据和所述深度数据的特征描述符，从所述一个或多个候选身体关节位置中识别身体关节位置，其中，所述最小偏差是基于所述深度数据的，以及所述最小偏差是基于所述用户进行的一个或多个动作的。