[发明专利]一种图像处理方法、装置、电子设备及存储介质

权利要求书

1.一种图像处理方法，其特征在于，所述方法包括：

获得多帧深度图像中的第一深度图像的手部的检测框；所述第一深度图像为所述多帧深度图像中的任一帧深度图像；

对所述检测框内的深度图像进行特征提取，基于提取出的特征得到所述手部的关键点的三维坐标数据。

2.根据权利要求1所述的方法，其特征在于，所述获得多帧深度图像中的第一深度图像的手部的检测框，包括：

响应于所述第一深度图像为所述多帧深度图像中的首帧深度图像的情况，对所述第一深度图像进行手部检测处理，获得所述第一深度图像的手部的检测框；

响应于所述第一深度图像为所述多帧深度图像中的非首帧深度图像的情况，基于第二深度图像中的手部的检测框，获得所述第一深度图像中的手部的检测框；所述第二深度图像为所述第一深度图像之前的一帧图像。

3.根据权利要求2所述的方法，其特征在于，所述基于第二深度图像中的手部的检测框，获得所述第一深度图像中的手部的检测框，包括：

基于所述第二深度图像中的手部的检测框所在区域确定第一区域；所述第一区域大于所述检测框所在区域；

根据所述第一区域确定所述第一深度图像中与所述第一区域的位置范围对应的手部的检测框。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述对所述检测框内的深度图像进行特征提取之前，所述方法还包括：

确定所述检测框内的手部的中心深度，基于所述中心深度对所述检测框内的深度图像进行居中化处理，得到居中化处理后的深度图像；

所述对所述检测框内的深度图像进行特征提取，包括：

对所述居中化处理后的深度图像进行特征提取。

5.根据权利要求4所述的方法，其特征在于，所述确定所述检测框内的手部的中心深度，包括：

基于所述第一深度图像中的手部的检测框内至少部分深度图像的深度值，确定所述手部的中心深度；

所述基于所述中心深度对所述检测框内的深度图像进行居中化处理，得到居中化处理后的深度图像，包括：

利用所述手部的中心深度，调整所述手部的检测框内的深度图像的深度值，得到居中化处理后的深度图像。

6.根据权利要求1至5任一项所述的方法，其特征在于，所述基于提取出的特征得到手部的关键点的三维坐标数据，包括：

基于提取出的特征得到手部的关键点的二维图像坐标数据和深度数据；所述二维图像坐标数据为图像坐标系下的数据；

获得采集所述多帧深度图像的图像采集设备的内部参数；

基于所述二维图像坐标数据、深度数据和所述内部参数得到手部的关键点的三维坐标数据；所述三维坐标数据为相机坐标系下的数据。

7.根据权利要求1至6任一项所述的方法，其特征在于，所述方法还包括：

基于手部的所述三维坐标数据确定所述手部的姿态；

基于所述手部的姿态确定交互指令。

8.一种图像处理装置，其特征在于，所述装置包括：第一处理单元和第二处理单元；其中，

所述第一处理单元，用于获得多帧深度图像中的第一深度图像的手部的检测框；所述第一深度图像为所述多帧深度图像中的任一帧深度图像；

所述第二处理单元，用于对所述检测框内的深度图像进行特征提取，基于提取出的特征得到所述手部的关键点的三维坐标数据。

9.根据权利要求8所述的装置，其特征在于，所述第一处理单元，用于响应于所述第一深度图像为所述多帧深度图像中的首帧深度图像的情况，对所述第一深度图像进行手部检测处理，获得所述第一深度图像的手部的检测框；响应于所述第一深度图像为所述多帧深度图像中的非首帧深度图像的情况，基于第二深度图像中的手部的检测框，获得所述第一深度图像中的手部的检测框；所述第二深度图像为所述第一深度图像之前的一帧图像。