[发明专利]多视角采集图像后合并的智能生成订单方法及智能售货机

权利要求书

1.一种多视角采集图像后合并的智能生成订单方法，其特征在于，所述方法包括：

S20：获取第一主摄像头采集商品区域得到的第一主视频和第二主摄像头采集商品区域得到的第二主视频，以及至少一个第一子摄像头采集商品区域得到的第一子视频和至少一个第二子摄像头采集商品区域得到的第二子视频；

S21：以所述第一子视频的商品区域覆盖所述第一主视频中与所述第一子视频相同的图像区域，得到第一目标视频，以所述第二子视频的商品区域覆盖所述第二主视频中与所述第二子视频相同的图像区域，得到第二目标视频；

所述S21包括：

获取发生商品变动对应的目标商品区域；

根据所述目标商品区域的位置信息，确定包含所述目标商品区域的所述第一子视频和所述第二子视频，其中，将包含所述目标商品区域的所述第一子视频和所述第二子视频记为目标子视频；

根据所述目标子视频的位置信息，确定位于所述目标子视频与所述第一主视频或与所述第二主视频之间的其他所述第一子视频或所述第二子视频作为中间子视频；

将所述第一主视频和所述第二主视频中非所述目标子视频和所述中间子视频对应的区域删除，分别得到优化后的第一视频和第二视频；

将属于所述第一子视频的所述目标子视频和各所述中间子视频与所述第一视频合并，得到所述第一目标视频，将属于所述第二子视频的所述目标子视频和各所述中间子视频与所述第二视频合并，得到所述第二目标视频；

S22：将所述第一目标视频的各帧图像与所述第二目标视频中采集时序相对应的各帧图像进行合并，得到目标视频，所述目标视频的每帧图像尺寸为所述第一目标视频的各帧图像的尺寸与第二目标视频对应的各帧图像的尺寸之和；

S23：将所述目标视频的各帧图像输入预置的目标检测模型，得到若干目标商品的商品信息；

S24：根据各目标商品的商品信息，生成商品订单信息；

其中，所述第一主摄像头和所述第二主摄像头采集的商品区域的范围相同，各所述第一子摄像头和所述第二子摄像头采集的商品区域的范围属于所述第一主摄像头或所述第二主摄像头采集的商品区域对应的部分区域，所述第一主摄像头和各所述第一子摄像头沿智能售货机的各层货架排列方向设置，且各所述第一子摄像头位于所述第一主摄像头下方，所述第二主摄像头和各所述第二子摄像头沿智能售货机的各层货架排列方向设置，且各所述第二子摄像头位于所述第二主摄像头下方。

2.根据权利要求1所述的多视角采集图像后合并的智能生成订单方法，其特征在于，所述S20包括;

S201：获取沿智能售货机的货架排列方向将智能售货机放置商品区域分为多个虚拟的商品区；

S202：控制各商品区对应的摄像头采集对应商品区的视频数据，得到第一主摄像头采集的所述第一主视频和所述第二主摄像头采集的所述第二主视频，以及至少一个所述第一子摄像头采集的所述第一子视频和至少一个所述第二子摄像头采集的所述第二子视频。

3.根据权利要求1所述的多视角采集图像后合并的智能生成订单方法，其特征在于，所述S20包括：

S203：获取用于采集商品区视频数据的摄像头的帧率和摄像头数量；

S204：根据所述帧率和所述摄像头数量，确定各摄像头开始采集对应商品区的视频数据的间隔时间；

S205：根据所述间隔时间，分别得到所述第一主摄像头、所述第二主摄像头、各所述第一子摄像头和各所述第二子摄像头开始采集视频数据的起始时刻；

S206：根据各所述起始时刻，控制对应的摄像头采集商品区域的视频数据，得到所述第一主视频、所述第二主视频、各所述第一子视频和各所述第二子视频；

其中，所述间隔时间为相邻两帧图像间隔时间的1/N，N为正整数。

4.根据权利要求1所述的多视角采集图像后合并的智能生成订单方法，其特征在于，所述S212包括：

S2121：对所述第一主视频和/或所述第二主视频的各帧图像进行分析，确定发生商品变动对应的各图像帧；

S2122：根据发生商品变动的各图像帧，将所述第一主视频和所述第二主视频分为多个视频段；

S2123：根据各所述视频段中发生商品变动对应的目标商品区域，确定各所述视频段对应的所述第一子视频和所述第二子视频。