[发明专利]一种使用图像标签辅助识别商品的方法及其系统

说明书

本发明涉及一种使用图像标签辅助识别商品的方法及其方法。该方法包括S1)上架阶段：通过智能货柜的后台管理系统设置SKU与标签的关联，并将其关联关系应用到各智能货柜中；S2)购物阶段：采集智能货柜内商品的图像信息，通过算法模型识别出顾客所选商品上设置的标签，并通过标签与SKU的关联关系将该标签转换成SKU；S3)结算阶段：结算系统根据识别出的SKU生成购物订单，进行结算。本发明的技术方案中深度学习算法只需要对标签进行分类，模型相对稳定，节省了对每种SKU进行图像采集和标注训练的工作，节省了采购SKU的成本和人工标注成本。

技术领域

本发明涉及智能货柜技术领域，尤其涉及一种使用图像标签辅助识别商品的方法及其系统。

背景技术

随着人力成本的不断提高及物联网智能技术的发展，越来越多的传统商店迅速削减店面人员，并且有越来越多的无人商店和智能货柜诞生。

为了实现无人购物的体验，目前智能货柜通常会借助图像识别算法，特别是深度学习算法，去识别货柜中售卖的商品。

深度学习算法从开发到应用的过程包括采集数据，标注以及算法训练，整个过程耗时较长，这个缺点在新品上架的时候凸显。

发明内容

本发明所要解决的技术问题是提供一种使用图像标签辅助识别商品的方法及其系统，通过给售卖商品加上图像标签，然后在系统中关联标签和实际售卖的商品，以图像算法负责识别标签，做标签到实际售卖商品的转换，从而省去了上新的过程。

为解决上述技术问题，本发明的技术方案是：

首先，本发明提供一种使用图像标签辅助识别商品的方法，包括以下步骤：

S1)上架阶段：通过智能货柜的后台管理系统设置SKU(Stock Keeping Unit，库存量单位)与标签的关联，并将其关联关系应用到各智能货柜中；

S2)购物阶段：采集智能货柜内商品的图像信息，通过算法模型识别出顾客所选商品上设置的标签，并通过标签与SKU的关联关系将该标签转换成SKU；

S3)结算阶段：结算系统根据识别出的SKU生成购物订单，进行结算。

上述技术方案中，步骤S1)中所述的各智能货柜分别设有唯一的编号。

上述技术方案中，步骤S2)具体步骤如下：

S21)智能货柜设有的图像采集装置，所述图像采集装置采集顾客打开智能货柜门前后的商品图像信息，并将所采集的图像信息上传到智能货柜算法服务端；

S22)所述算法服务端接收到智能货柜开门前后图像信息后，经过对比确定顾客所选商品，由算法模型分类识别出该商品上的标签；

S23)所述业务服务端根据识别出的标签，查询标签与SKU的关联关系，生成订单消息,将该标签转换成SKU。

上述技术方案中，所述算法模型分类为深度学习模型分类。

其次，本发明提供一种使用图像标签辅助识别商品的系统，其包括：

若干储存商品的智能货柜，与智能货柜通信相连的服务器及结算终端；

所述智能货柜设有图像采集装置，用于采集智能货柜门开闭前后货柜内的商品图像信息；

所述服务器内置有图像识别算法模块及业务处理模块；

所述图像识别算法模块用于识别图像采集装置所采集的图像信息，通过对比确定出顾客所选商品，并识别该商品上的标签；

所述业务处理模块用于将顾客所选商品的标签转换为SKU，并生成购物订单信息；

所述结算终端根据所述购物订单信息进行结算。