[发明专利]基于开放环境的无人结算方法、装置、设备和系统

说明书

本发明公开了一种基于开放环境的无人结算方法、装置、设备和系统，方法包括：接收光栅传感器组件传输的光栅光束状态信息，当检测到光栅光束状态信息发生变化时，以发生变化的时刻为基准，获取第一摄像头在该时刻之前拍摄的N帧图像、在该时刻之后拍摄的M帧图像以及第二摄像头在该时刻拍摄到的至少一帧图像；根据在该时刻之前拍摄的N帧图像、在该时刻之后拍摄的M帧图像检测是否存在被手部取走的商品；当检测到被手部取走的商品时，将被取走的商品与人脸图像进行绑定，完成一次消费记录，当顾客进入结算区域时，采集顾客的人脸图像，并获取与人脸图像对应的所有消费记录，以形成账单完成结算。本发明提供了一种可靠性高，成本低的无人结算方案。

技术领域

本发明涉及人工智能技术应用领域，具体地涉及一种基于开放环境的无人结算方法、装置、设备和系统。

背景技术

智慧社会，智慧城市已经成为目前国内城市建设的一个主要方向，随着人工智能技术的爆发，零售行业也提出了新零售的概念和举措，将走向高度智能化、便捷化、自动化、专业化，大大减少中间环节，解放人力。其中，智能无人商店成为了当前零售业最新兴的市场。智能无人商店，就是人工智能与新零售二者结合的产物，就是7x24小时无人值守的，通过人工智能实现购物的全部流程的店铺。这种店铺通过与人工智能系统连接，从用户的进入到挑选商品、收银、离开，全程不需要任何人工参与便可自助购物。

现有技术中，目前无人结算主要是在限制环境和开放环境下实现。限制场景主要对交易对象，交易场景，交易商品中的一项或几项进行限制。在限制环境下常见的无人结算系统主要有基于RFID标签和智能商品柜或冰柜的无人结算系统。基于RFID的无人结算系统需要给每一个商品贴上RFID标签，结算时进入专用的结算间识别RFID标签后结算。以及基于智能商品柜或冰柜的无人结算系统，每次交易前需要先进行身份验证，身份验证通过后开启柜门，关闭柜门后结算，每次交易对象只能有一个。而开放场景对交易场景没有严格的限制，通过多种身份识别技术对交易对象进行过身份绑定后，允许任意数量的交易对象进行同时交易，开放场景的无人结算系统通常通过计算机视觉配合多种传感器来实现，由于在开放场景下人的行为较为复杂，并且涉及到多人并行交易，人的身份验证，行为检测，商品和身份的绑定等问题，只使用单一传感器很难实现。

发明内容

本发明实施例提出的一种基于开放环境的无人结算方法、装置、设备和系统。本发明提供了一种可靠性高，成本低的无人结算方案，可以有效的确定商品的种类与数量，商品与人的交互行为，以及匹配商品ID与顾客ID。

第一方面，本发明实施例提供一种基于开放环境的无人结算方法，包括：

接收光栅传感器组件传输的光栅光束状态信息；其中，所述光栅传感器组件包括光栅发射器以及光栅接收器；所述光栅发射器放置于商品柜的一端，所述光栅接收器放置于商品柜的另一端；

当检测到光栅光束状态信息发生变化时，以发生变化的时刻为基准，获取第一摄像头在该时刻之前拍摄的N帧图像、在该时刻之后拍摄的M帧图像以及第二摄像头在该时刻拍摄到的至少一帧图像；其中，所述第一摄像头用于采集手部图像，所述第二摄像头用于采集人脸图像；

根据在该时刻之前拍摄的N帧图像、在该时刻之后拍摄的M帧图像检测是否存在被手部取走的商品；

当检测到被手部取走的商品时，将被取走的商品与所述人脸图像进行绑定，以完成一次消费记录；

当顾客进入结算区域时，采集顾客的人脸图像，并获取与所述人脸图像对应的所有消费记录，以形成账单完成结算。

进一步地，还包括：根据在该时刻之前拍摄的N帧图像、在该时刻之后拍摄的M帧图像检测是否存在被手部放回的商品；当检测到被手部放回的商品时，将被放回的商品与所述人脸图像进行绑定，删除一次消费记录。

进一步地，所述第一摄像头的角度沿光栅光束方向，用于拍摄到所述光栅发射器与所述光栅接收器的位置。