[发明专利]人体行为的识别方法、装置、计算机设备和存储介质

权利要求书

1.一种人体行为的识别方法，其特征在于，所述方法包括：

从目标视频的视频帧图像中截取指定的区域图像；

在所述区域图像提取各人体不同部位的关键点；

对各不同所述部位的关键点进行组合，得到多个关键点集合；其中，各所述关键点集合中均存在至少三个所述部位的关键点，且不同所述关键点集合中之间至少存在一个不同所述部位的关键点；

针对每个所述关键点集合，在当前所述关键点集合内，计算以目标部位的关键点为顶点分别指向剩余部位的关键点的射线所形成的夹角，直至得到每个所述关键点集合对应的夹角；

基于各所述夹角确定所述人体对应的人体行为；所述人体行为，用于生成对应的多媒体指令，以根据所述多媒体指令对多媒体设备进行控制。

2.根据权利要求1所述的方法，其特征在于，所述从目标视频的图像帧中截取指定的区域图像包括：

对目标视频进行解码，得到视频帧图像序列；

在所述视频帧图像序列中选取当前视频帧图像；

从所述当前视频帧图像中截取指定的区域图像。

3.根据权利要求1所述的方法，其特征在于，所述在所述区域图像提取各人体不同部位的关键点包括：

通过机器学习模型对所述区域图像进行关键点提取，得到各人体不同部位的关键点；

所述对各不同所述部位的关键点进行组合，得到多个关键点集合之前，所述方法还包括：

通过所述机器学习模型确定所述关键点的坐标；

从各所述人体不同部位的坐标中，选出关于各所述人体左右对称的各不同所述部位的坐标，形成坐标对；

当在水平方向上所述坐标对中人体右侧部位的坐标大于人体左侧部位的坐标时，判定所述坐标对对应的所述人体为背对人体；

将所述背对人体对应的各所述关键点进行删除。

4.根据权利要求1所述的方法，其特征在于，所述对各不同所述部位的关键点进行组合，得到多个关键点集合之前，所述方法还包括：

对所述区域图像中各所述人体的不同部位进行热力计算，得到各相同所述部位分别对应的关键点热力图；

当所述关键点热力图中目标人体的关键点置信度不大于预设置信度时，判定所述目标人体为不完整人体；

将所述目标人体对应的所述关键点进行删除。

5.根据权利要求1所述的方法，其特征在于，所述基于各所述夹角确定所述人体对应的人体行为包括：

将各所述夹角进行组合，得到不同夹角向量；不同所述夹角向量对应不同人体行为；

基于不同所述夹角向量确定所述人体对应的所述人体行为。

6.根据权利要求1所述的方法，其特征在于，当前所述关键点集合包括脖子关键点、鼻子关键点、左肩关键点；所述方法还包括：

所述计算以目标部位的关键点为顶点分别指向剩余部位的关键点的射线所形成的夹角包括：

以所述脖子关键点为顶点，绘制指向所述鼻子关键点的第一射线，以及，绘制指向所述左肩关键点的第二射线；

以所述第一射线顺时针方向转到所述第二射线形成的角，作为射线的夹角。

7.根据权利要求3或4所述的方法，其特征在于，所述方法还包括：

在删除关键点之后，若剩余的所述关键点的总数小于预设数量时，重新获取所述目标视频的视频帧图像，在新获取的所述视频帧图像中截取区域图像。