[发明专利]多视角采集图像后融合的智能生成订单方法及智能售货机

说明书

本发明属于图像处理技术领域，解决了现有技术智能售货机存在操作繁琐或异常订单，所导致的用户体验效果不佳技术问题，提供了一种多视角采集图像后融合的智能生成订单方法及智能售货机。该方法包括：获取商品区域的第一主视频和与第一主视频视角不同的第二主视频；将第一主视频和第二主视频的各帧图像进行合并，得到目标视频；对目标视频的各帧图像进行图像分析，得到用于生成商品订单信息的各目标商品，从而得到最终的商品订单信息。本发明还包括用于执行上述方法的装置及智能售货机。本发明可以通过从不同视角获取购物视频，避免商品被遮挡影响检测准确性，避免异常订单产生。

技术领域

本发明涉及图像分析技术领域，尤其涉及一种多视角采集图像后融合的智能生成订单方法及智能售货机。

背景技术

随着人工智能技术的不断发展，零售业的售卖方式也发生了巨大的变化，其中智能售货机已经遍布在城市的各种场合，包括车站、商城、旅游景区或百货店均能发现各式各样的智能售货机，智能售货机以其无需专人看守、用户自动下单、购物结账的方式，极大遍历了特殊场景用户对于商品的购物需求。

然而，现有智能售货机包括全开门智能售货机和通过按键下单的智能售货机，其中，全开门智能售货机用户可以在智能售货机柜门打开时，在一次购物中可以进行多次拿放操作，同时可以一次选择多件商品后再进行统一结算，该智能售货机极大方便了用户的购物需求，但是这类智能售货机因为主要依赖购物视频进行商品订单结算，当用户在拿放商品时，商品部分特征会被遮挡，因此容易产生误检，生成异常订单的问题；另一类通过按键下单的智能售货机在用户需要购物时，需要事先确定自己需要购买的所有商品，然后购买一件进行一次结算后再进行第二件购买及结算，经过多次下单和结算才能完成所有购物，且不能回退商品，因此存在操作繁琐的问题。

发明内容

有鉴于此，本发明实施例提供了一种多视角采集图像后融合的智能生成订单方法、装置及智能售货机，用以解决现有的智能售货机存在操作繁琐或异常订单，所导致的用户体验效果不佳技术问题。

本发明采用的技术方案是：

本发明提供了一种多视角采集图像后融合的智能生成订单方法，所述方法包括：

S10：获取第一主摄像头在第一视角采集商品区域得到的第一主视频和第二主摄像头在不同于所述第一视角的第二视角采集所述商品区域得到的第二主视频，其中，所述第一主摄像头和第二主摄像头的帧率相同且采集得到帧数相同的所述第一主视频和第二主视频；

S11：将所述第一主视频的各帧图像与所述第二主视频中采集时序相对应的各帧图像一一进行合并，生成目标视频，其中，目标视频的每帧图像尺寸为所述第一主视频的各帧图像的尺寸与第二主视频对应的各帧图像的尺寸之和；

S12：将所述目标视频的各帧图像输入预置的目标检测模型，得到若干目标商品的商品信息；

S13：根据各目标商品的商品信息，生成商品订单信息；

其中，所述第一主摄像头所采集的商品区域的范围与所述第二主摄像头所采集的商品区域的范围相同。

优选地，所述S11包括：

S111：获取所述第一主摄像头开始采集所述第一主视频对应的第一起始时刻和所述第二主摄像头开始采集所述第二主视频对应的不同于所述第一起始时刻的第二起始时刻；

S112：根据所述第一起始时刻和所述第二起始时刻，将在预设时间内采集得到的所述第一主视频的各帧图像与所述第二主视频中时序相对应的各帧图像进行一一合并，生成所述目标视频；

其中，所述第一起始时刻和所述第二起始时刻的时间间隔小于摄像头帧率对应的相邻两帧图像的时间间隔。

优选地，所述S12包括：