[发明专利]商品识别及结算方法、装置、电子设备、存储介质

权利要求书

1.一种商品识别模型的训练方法，其特征在于，包括：

获取样本数据集合，所述样本数据集合中的各个样本数据包含至少一个单品和/或至少一个由多个单品组合得到的组合商品的图像数据；其中，单品的图像数据被标注有相应的单品类别信息，组合商品的图像数据被标注有相应的组合类别信息；

针对所述样本数据集合中的任一样本数据，对所述任一样本数据进行划分以得到所述任一样本数据中各个单品的图像数据，并对划分得到的图像数据进行排序，所述任一样本数据包含的组合商品的图像数据被划分为组成所述组合商品的各个单品的图像数据；

将划分得到的图像数据按照排序依次作为编解码网络的编码器中各个时间步对应的编码网络的输入参数，并将所述任一样本数据中标注的单品类别信息和组合类别信息分别作为所述编解码网络的解码器中各个时间步对应的解码网络的输出参数，以对所述编解码网络进行训练得到商品识别模型。

2.根据权利要求1所述的方法，其特征在于，所述编码器的时间步长与划分所述任一样本数据得到的单品数量相匹配。

3.根据权利要求1所述的方法，其特征在于，所述解码器的时间步长与所述任一样本数据中标注的单品类别信息和组合类别信息的数量之和相匹配；

或者，所述解码器的时间步长为预设时间步长。

4.根据权利要求1所述的方法，其特征在于，所述任一样本数据通过对相应的原始图像数据进行主体检测得到；所述对划分得到的图像数据进行排序，包括：

确定划分得到的各个图像数据对应的单品在所述原始图像数据中的位置信息，按照针对所述原始图像数据的预设方向和所述位置信息对划分得到的各个图像数据进行排序。

5.一种商品识别方法，其特征在于，应用于服务端；所述方法包括：

获取商户的参考商品的参考图像数据，所述参考商品属于单品或者由多个单品组合得到的组合商品，单品的参考图像数据被标注有相应的单品类别信息，组合商品的参考图像数据被标注有相应的组合类别信息；

在所述参考商品属于单品的情况下，通过如权利要求1-4中任一项方法中的商品识别模型对所述参考图像数据进行特征推理得到所述参考商品的第一单品特征，并建立所述参考商品的参考图像数据被标注的单品类别信息与所述第一单品特征之间的映射关系；在所述参考商品属于组合商品的情况下，对所述参考图像数据进行划分得到所述参考商品中各个单品的图像数据，通过所述商品识别模型分别对划分得到的各个图像数据进行特征推理得到对应于各个单品的第二单品特征，将各个第二单品特征共同作为所述参考商品的组合商品特征，并建立所述参考商品的参考图像数据被标注的组合类别信息与所述组合商品特征之间的映射关系；

在接收到目标商品的待识别图像数据的情况下，对所述待识别图像数据进行划分得到所述目标商品包含的单品的图像数据，通过所述商品识别模型分别对划分得到的各个图像数据进行特征推理得到对应于各个单品的第三单品特征，在建立的映射关系中查询与所述第三单品特征相匹配的目标特征，并将所述目标特征对应的类别信息作为针对所述目标商品的识别结果。