[发明专利]人货绑定方法、装置和电子设备

权利要求书

1.一种人货绑定方法，包括：

获得在区域中采集的图像，其中，所述区域中存在至少一件货物；

识别所述图像中的手部位置和头部位置以及所述手部位置和头部位置的对应关系；

响应于货物移动事件，基于所述手部位置和头部位置以及所述手部位置和头部位置的对应关系，确定所述货物与头部的对应关系。

2.根据权利要求1所述的方法，其中，所述识别所述图像中的手部位置和头部位置以及所述手部位置和头部位置的对应关系包括：

通过经训练的神经网络处理所述图像，得到手部位置和头部位置以及图像的亲和力场信息，其中，所述亲和力场信息包括图像中每个像素点的部分亲和字段向量；

将每个手部位置和每个头部位置两两组合，得到多个手部头部对；对于每个手部头部对，计算该手部位置与头部位置的连线向量与各像素点的部分亲和字段向量的点积的线积分；

通过全局优化，确定所述手部位置和头部位置的对应关系，使得具有对应关系的手部头部对的线积分最大。

3.根据权利要求1所述的方法，其中，响应于货物移动事件，所述基于所述手部和头部的位置以及所述手部和头部的对应关系，确定所述货物与头部的对应关系包括：

响应于货物移动事件，确定所述货物的位置；

基于所述货物的位置，确定所述图像中与所述货物关联的手部；

基于所述手部和头部的位置以及所述手部和头部的对应关系，确定与所述手部对应的头部，以确定所述货物与头部的对应关系。

4.根据权利要求3所述的方法，还包括接收货物移动事件，其中，所述货物移动事件通过以下方式确定：

基于重力传感参数确定发生货物移动事件；或者

通过射频识别确定发生货物移动事件。

5.根据权利要求3所述的方法，还包括：

通过头部跟踪，获得头部与用户的对应关系；

在确定所述货物与头部的对应关系后，基于所述头部与用户的对应关系，确定所述货物与用户的对应关系。

6.一种人货绑定装置，包括：

获得模块，用于获得在区域中采集的图像，其中，所述区域中存在至少一件货物；

识别模块，用于识别所述图像中的手部位置和头部位置以及所述手部位置和头部位置的对应关系；

第一确定模块，用于响应于货物移动事件，基于所述手部位置和头部位置以及所述手部位置和头部位置的对应关系，确定所述货物与头部的对应关系。

7.根据权利要求6所述的装置，其中，所述识别模块包括：

分析子模块，用于通过经训练的神经网络处理所述图像，得到手部位置和头部位置以及图像的亲和力场信息，其中，所述亲和力场信息包括图像中每个像素点的部分亲和字段向量；

组合子模块，用于将每个手部位置和每个头部位置两两组合，得到多个手部头部对；对于每个手部头部对，计算该手部位置与头部位置的连线向量与各像素点的部分亲和字段向量的点积的线积分；；

优化子模块，用于通过全局优化，确定所述手部位置和头部位置的对应关系，使得具有对应关系的手部头部对的线积分最大。

8.根据权利要求6所述的装置，其中，所述第一确定模块包括：

位置确定子模块，用于响应于货物移动事件，确定所述货物的位置；

手部确定子模块，用于基于所述货物的位置，确定所述图像中与所述货物关联的手部；

头部确定子模块，用于基于所述手部和头部的位置以及所述手部和头部的对应关系，确定与所述手部对应的头部，以确定所述货物与头部的对应关系。

9.根据权利要求8所述的装置，还包括接收模块，用于接收货物移动事件，其中，所述货物移动事件通过以下方式确定：

基于重力传感参数确定发生货物移动事件；或者

通过射频识别确定发生货物移动事件。