[发明专利]一种自动售货机的补货管理方法、装置和用户终端

权利要求书

1.一种自动售货机的补货管理方法，其特征在于，包括：

采集自动售货机的货柜中的货品对照图像，并对所述货品对照图像进行识别，确定所述货品对照图像对应的存货记录；所述存货记录包括商品类别和与所述商品类别对应的商品数量；

接收购物开始指令，并根据所述购物开始指令开始购物流程，接收购物仓中的每一个单元格中的重力传感器返回的重力传感信号；

根据所述重力传感信号，通过与所述单元格对应的摄像头采集所述单元格内的商品图像；

基于所述货品对照图像，对所述商品图像进行识别，确定用户所抓取的目标商品的商品类别和与所述商品类别对应的商品数量，并根据所述目标商品的所述商品类别和所述商品数量通过语音模块实时播放，以提示所述用户；

实时采集每个所述单元格内的单元格区域变化图像；

提取所述单元格区域变化图像中的包含有所述用户的购物手势的关键帧和与所述关键帧对应的时间戳；

对所述关键帧进行识别，若所述关键帧为退货动作对应的退货关键帧；

则确定每个所述退货关键帧中的退货手势的手势轮廓；

根据所述轮廓截取所述退货关键帧中的手势商品截图；

根据所述手势商品截图，基于所述关键帧对应的时间戳构建退货移动轨迹；

根据所述退货移动轨迹，确定目标商品所放置的单元格区域，并基于预设商品单元格放置区域，判断退货商品是否放置于与所述商品类别对应的单元格区域中；

若否，则通过所述语音模块实时播放，以提示所述用户放置区域出现错误；

接收购物结束指令，根据所述购物结束指令采集所述货柜中的货品更新图像，并对所述货品更新图像进行识别，根据识别结果生成商品购买清单，并生成与所述商品购买清单对应的支付信息，以便于用户根据所述支付信息进行支付；

接收用户根据所述支付信息支付后生成的支付完成信息，根据所述商品购物清单更新所述存货记录；

将更新后的所述存货记录中的每个商品类别对应的商品数量与该商品类别对应的预设存货阈值进行比对；

若所述商品类别对应的所述商品数量小于该商品类别所对应的所述预设存货阈值，则生成包括所述商品类别和与所述商品类别对应的所述商品数量的补货清单，以便于依据所述补货清单进行补货。

2.如权利要求1所述自动售货机的补货管理方法，其特征在于，所述若否，则通过所述语音模块实时播放，以提示所述用户放置区域出现错误之后，还包括：

控制与所述商品类别对应的所述单元格区域的LED指示灯亮灯，以提示所述用户将所述目标商品放置于所述LED指示灯对应的所述单元格区域。

3.如权利要求1所述自动售货机的补货管理方法，其特征在于，所述“接收购物结束指令，根据所述购物结束指令采集所述货柜中的货品更新图像，并对所述货品更新图像进行识别，根据识别结果生成商品购买清单，并生成与所述商品购买清单对应的支付信息，以便于用户根据所述支付信息进行支付”包括：

接收购物结束指令，根据所述购物结束指令采集所述货柜中的货品更新图像；

对所述货品更新图像进行灰度处理，得到灰度图像；

对所述灰度图像进行二值化，获得二值化灰度图像；

获取所述二值化灰度图像中的商品的货品轮廓；

根据所述货品轮廓提取与包括所述货品的货品截图；

通过预先训练的图像识别模型确定所述货品截图中的更新记录；所述更新记录包括商品类别和与所述商品类别对应的更新后的商品数量；

将所述更新记录与所述存货记录进行比对，根据比对结果，生成商品购买清单；并且，生成与所述商品购买清单对应的支付信息，以便于用户根据所述支付信息进行支付。