[发明专利]人体关键点检测及部位解析的联合处理方法、设备及产品

权利要求书

1.一种人体关键点检测及部位解析的联合处理方法，其特征在于，包括：

获取目标图像；

采用训练至收敛的目标网络模型对所述目标图像进行人体关键点检测及部位解析的联合处理，以获得人体关键点检测结果及人体部位解析结果，所述目标网络模型是采用训练样本对初始网络模型进行训练的过程中采用神经网络自动搜索技术对所述初始网络模型进行最优网络结构搜索后获得的；

通过所述目标网络模型输出人体关键点检测结果及人体部位解析结果。

2.根据权利要求1所述的方法，其特征在于，所述目标网络模型包括：目标交互子网络模型；

所述采用训练至收敛的目标网络模型对所述目标图像进行人体关键点检测及部位解析的联合处理，以获得人体关键点检测结果及人体部位解析结果，包括：

采用所述目标网络模型对所述目标图像分别进行人体关键点检测及部位解析处理，以分别获得第一人体关键点检测特征图和第一人体部位解析特征图；

采用所述目标交互子网络模型对所述第一人体关键点检测特征图及所述第一人体部位解析特征图按照已确定的最优交互方式进行特征交互，以分别获得交互后的第二人体关键点检测特征图及第二人体部位解析特征图；

根据所述第一人体关键点检测特征图和所述第二人体关键点检测特征图确定人体关键点检测结果，并根据所述第一人体部位解析特征图和所述第二人体部位解析特征图确定人体部位解析结果。

3.根据权利要求2所述的方法，其特征在于，所述目标交互子网络模型包括：两个目标可搜索模块和两个融合模块，所述目标可搜索模块包括多个第一目标常规操作单元，所述融合模块包括多个第二目标常规操作单元；

所述采用所述目标交互子网络模型对所述第一人体关键点检测特征图及所述第一人体部位解析特征图按照已确定的最优交互方式进行特征交互，以分别获得交互后的第二人体关键点检测特征图及第二人体部位解析特征图，包括：

将第一人体关键点检测特征图与第一目标可搜索模块中第一目标常规操作单元按照对应的目标操作空间进行运算，以获得运算后人体关键点检测特征图，并将运算后人体关键点检测特征图与所述第一人体部位解析特征图采用第一融合模块中第二目标常规操作单元对应的目标操作空间进行运算以获得第二人体关键点检测特征图；

将第一人体部位解析特征图与第二目标可搜索模块中第一目标常规操作单元按照对应的目标操作空间进行运算，以获得运算后人体部位解析特征图，并将运算后人体部位解析特征图与所述第一人体关键点检测特征图采用第二融合模块中第二目标常规操作单元对应的目标操作空间进行运算，以获得第二人体部位解析特征图。

4.根据权利要求2所述的方法，其特征在于，所述目标网络模型还包括：目标主干子网络模型、目标关键点检测子网络模型、目标部位解析子网络模型；

所述采用所述目标网络模型对所述目标图像分别进行人体关键点检测及部位解析处理，以分别获得第一人体关键点检测特征图和第一人体部位解析特征图，包括：

采用所述目标主干子网络模型对所述目标图像进行共用特征提取，以获取多个共用特征图，每个共用特征图具有不同分辨率；

采用所述目标关键点检测子网络模型对多个共用特征图进行人体关键点特征提取，以获得第一人体关键点检测特征图；

采用所述目标部位解析子网络模型对多个共用特征图进行人体部位特征提取，以获得第一人体部位解析特征图。