[发明专利]自助收银的风险识别方法、装置及系统

权利要求书

1.自助收银的风险识别方法，包括：

获取顾客在自助收银区域的视频信息，对所述视频信息中用户对商品的扫码行为进行异常行为识别，根据识别结果确定第一风险信息；

若获取到支付成功信息，根据从所述视频信息中识别出的商品信息以及已扫码的商品信息，确定未扫码商品信息；基于所述未扫码商品信息确定第二风险信息；

依据所述第一风险信息和所述第二风险信息，输出风险识别结果。

2.根据权利要求1所述的方法，其中，对所述视频信息中用户对商品的扫码行为进行异常行为识别之前，还包括：

若检测到所述视频信息中出现顾客进入自助收银区域，设置检测状态为未使用且设备前有顾客，对所述视频信息中的商品信息进行识别，并初始化各商品的属性为未扫码；或者，

若在未使用且设备前有顾客状态下获取到扫码开始信息，设置检测状态为正在使用，在正在使用状态下执行所述对所述视频信息中用户对商品的扫码行为进行异常行为识别的步骤，并将被扫码成功的商品的属性设置为已扫码。

3.根据权利要求2所述的方法，其中，对所述视频信息中的商品信息进行识别包括：

根据视频信息中的商品轨迹信息和商品特征信息，识别得到各商品信息。

4.根据权利要求2所述的方法，该方法还包括：在检测到所述视频信息中出现顾客进入自助收银区域之前，设置检测状态为未使用且设备前无顾客；

在未使用且设备前无顾客状态下，若从所述视频信息中检测到自助收银设备处有商品，则输出提醒信息。

5.根据权利要求1所述的方法，该方法还包括：

若获取到进入支付页面的信息，设置检测状态为正在支付；

在正在支付状态下，获取到所述支付成功信息且从所述视频信息中检测到所述顾客未离开所述自助收银区域，则设置检测状态为支付完成且顾客未离开；

在支付完成且顾客未离开状态下执行所述根据从所述视频信息中识别出的商品信息以及已扫码的商品信息，确定未扫码商品信息的步骤。

6.根据权利要求5所述的方法，该方法还包括：

在支付完成且顾客未离开状态下，若从所述视频信息中检测到新的顾客进入所述自助收银区域，则设置检测状态为未使用且设备前有顾客；和/或，

在支付完成且顾客未离开状态下，若从所述视频信息中检测到所述顾客离开所述自助收银区域且未检测到新的顾客进入所述自助收银区域，则设置检测状态为未使用且设备前无顾客。

7.根据权利要求1所述的方法，其中，所述对所述视频信息中用户对商品的扫码行为进行异常行为识别，根据识别结果确定第一风险信息包括：

对所述视频信息中的商品位置信息和/或人体姿态信息进行识别，依据识别结果执行以下至少一种：

若商品轨迹经过扫码装置前区域的设定时长内未收到扫码成功信息，则确定存在商品经过扫码区未扫码风险；

若获取到扫码成功信息，将扫码成功信息包含的商品标签信息在商品特征库中对应的商品特征与从视频信息中识别出的商品特征进行相似度计算，若相似度低于预设相似度阈值，则确定存在商品偷换标签扫码风险；

若商品轨迹在扫码装置前区域且顾客对该商品执行多次扫码动作的设定时长内未收到扫码成功信息，则确定存在商品多次扫码失败风险；

若商品轨迹未经过扫码装置前区域且出现异常运动轨迹且未收到该商品扫码成功的信息，则确定存在商品异常运动未扫码风险；

若商品成功被扫码后从购买清单中被删除或该商品计数为0，则确定存在商品扫码后被删除风险；

若扫码后未接收到支付成功信息且从所述视频信息检测到所述顾客离开所述自助收银区域，则确定存在未支付离开风险。

8.根据权利要求1所述的方法，其中，基于所述未扫码商品信息确定第二风险信息包括：

对已扫码商品和未扫码商品进行相似度计算，对相似度大于预设相似度阈值的未扫码商品进行过滤，其中所述相似度基于商品的轨迹信息和/或特征信息计算得到；

若经过过滤处理后仍存在未扫码商品，则确定存在第二风险。