[发明专利]基于增强现实的图像拼接方法、系统、设备及存储介质

说明书

本发明提供了一种基于增强现实的图像拼接方法、系统、设备及存储介质，包括：采用第一图像，根据所述第一图像的生成与所述第一图像相对应的成像区域；预览待采集的第n图像，根据成像区域与所述待采集的第n图像生成重叠提示区域并展示所述重叠提示区域，在第一图像和第n图像中提取多个重合的角点或特征点生成图像拼接转换矩阵；当所述重叠提示区域符合第一预设规则时，采集第n图像，进而根据所述图像拼接转换矩阵拼接所述第一图像和所述第n图像生成拼接图像，n为大于1的自然数。本发明在采集待拼接的另一图像时，能够预览另一图像与先采集到的前一图像的重叠区域，保证了采集到另一图像与前一图像的匹配效果，提高了图像拼接的质量。

技术领域

本发明涉及新零售技术，具体地，涉及一种基于增强现实的图像拼接方法、系统、设备及存储介质。

背景技术

新零售，即企业以互联网为依托，通过运用大数据、人工智能等先进技术手段，对商品的生产、流通与销售过程进行升级改造，进而重塑业态结构与生态圈，并对线上服务、线下体验以及现代物流进行深度融合的零售新模式。

在新零售系统的搭建过程中，需要对货架的图像进行采集，以对货架进行重建并识别货架上的商品信息。而在超市、商场以及一些便利店中，多个货架依次排列形成较长的序列，因此无法通过相机实现对整排货架进行采集。当采集到的货架图像超过一定长度时，图像上的商品会显示模糊，不容易进行识别。因此在通过货架的图像对货架进行重建时，需要对货架进行分段采集，将多张货架的图像拼接形成货架的整张图像。

传统的图像拼接技术是将几张图像进行简单的加权融合或淡入淡出处理。但是当目标区域位于重叠提示区域时，会使目标变形。当目标区域位于拼接接缝时，表现出同一目标亮度不一，或边界模糊。此外，当配准算法得到的转换矩阵并不是最优解时，导致重叠部分目标会出现“鬼影”。

发明内容

针对现有技术中的缺陷，本发明的目的是提供一种基于增强现实的图像拼接方法、系统、设备及存储介质。

根据本发明提供的基于增强现实的图像拼接方法，其特征在于，包括如下步骤：

步骤S1：采用第一图像，根据所述第一图像的生成与所述第一图像相对应的成像区域；

步骤S2：预览待采集的第n图像，根据成像区域与所述待采集的第n图像生成重叠提示区域并展示所述重叠提示区域，在第一图像和第n图像中提取多个重合的角点或特征点生成图像拼接转换矩阵；

步骤S3：当所述重叠提示区域符合第一预设规则时，采集第n图像，进而根据所述图像拼接转换矩阵拼接所述第一图像和所述第n图像生成拼接图像，n为大于1的自然数。

优选地，所述步骤S2包括如下步骤：

步骤S201：提取所述第一图像的多个角点；

步骤S202：在预览的第n图像中通过稀疏光流法得到所述角点在所述第n图像中的位置；

步骤S203：根据多个所述角点在所述第一图像和所述第n图像中的位置生成所述第 n图像与所述另一图像之间的第n单应性转换矩阵H_n，进而根据第n单应性转换矩阵H_n生成所述重叠提示区域；

步骤S204：当所述预览的视角变化时生成第n+1图像的预览，通过稀疏光流法提取所述第n+1图像和所述第n图像中重合的角点，根据所述第n+1图像和所述第n图像中重合的角点生成第n+1单应性转换矩阵H_n+1，进而根据第n+1单应性转换矩阵H_n+1生成所述第n+1图像和所述第n图像之间的重叠提示区域；

步骤S205：迭代执行步骤S204，依次生成预览的第n+m图像的第n+m单应性转换矩阵H_n+m和第n+m图像与第n+m-1图像之间的重叠提示区域，m为大于等于1的自然数；