[发明专利]基于视觉和重力感应的商品识别方法、装置和系统

权利要求书

1.一种基于视觉和重力感应的商品识别方法，其特征在于，所述商品识别方法包括：

对采集的商品图像进行识别，获取与N次取放行为对应的多个视觉识别结果，每个所述视觉识别结果对应一次取放行为，所述视觉识别结果包括：取放动作、取放商品和取放时间，N为自然数；

获取与支撑件上所支撑商品发生的M次重量变化的每次重量变化对应的重量识别结果，所述重量识别结果包括：重量变化值和重量变化时间，M为自然数；

判断发生的M次重量变化对应的总重量变化值与所述N次取放行为对应的取放商品的总重量值是否一致；

若判断为不一致，则根据M个所述重量识别结果对每个所述视觉识别结果进行完善，得到所述N次取放行为对应的识别商品总和；

判断是否有与多个视觉识别结果中第i个视觉识别结果的取放时间匹配的重量变化时间，并将重量识别结果的重量变化值与视觉识别结果的取放动作和取放商品在时间轴上进行时间同步，用时间轴对其重量识别结果和视觉识别结果进行对齐，以匹配重量变化时间和取放时间；i为自然数；

若判断为没有，则与取放时间对应的取放商品不属于识别商品总和；

所述根据M个所述重量识别结果对每个所述视觉识别结果进行完善，得到所述N次取放行为对应的识别商品总和，包括：

对每个所述重量识别结果执行如下操作：

判断是否有与所述重量识别结果的重量变化时间匹配的取放时间；将重量识别结果的重量变化值与视觉识别结果的取放动作和取放商品在时间轴上进行时间同步，用时间轴对齐两种结果；

若判断为没有，则根据所述重量变化值确定补充商品，所述补充商品属于所述识别商品总和；

若判断为有，则与所述取放时间对应的所述取放商品属于所述识别商品总和。

2.根据权利要求1所述的商品识别方法，其特征在于，所述若判断为有，之后，所述商品识别方法还包括：

判断所述重量识别结果的重量变化值和与所述取放时间对应的取放商品的重力值是否一致；

若判断为不一致，则根据所述重量变化值、待售卖各商品的重力值和所述取放商品得到与所述取放时间对应的实际商品，所述实际商品属于所述识别商品总和；

若判断为一致，则跳转至所述与所述取放时间对应的所述取放商品属于所述识别商品总和的步骤。

3.根据权利要求1所述的商品识别方法，其特征在于，所述根据M个所述重量识别结果对每个所述视觉识别结果进行完善，得到所述N次取放行为对应的识别商品总和，还包括：

对每个所述视觉识别结果执行如下操作：

判断是否有与所述视觉识别结果的取放时间一致的重量变化时间；

若判断为没有，则与所述取放时间对应的取放商品不属于所述识别商品总和。

4.根据权利要求1所述的商品识别方法，其特征在于，所述对采集的商品图像进行识别，包括：

对采集的商品图像进行背景分离处理，得到所述商品图像的前景图像；

对所述前景图像进行识别。