[发明专利]自动引导的图像捕获和展示

权利要求书

1.一种用于创建物品列表的方法，包括：

捕获物品的图像，包括：

引导用户将移动设备定位在相对所述物品的一方向上，使得所述物品被包括在所述移动设备的用户界面的区域的边界内；

通过所述移动设备的相机检测所述物品并且捕获所述物品的至少一个图像帧；

计算所述图像帧的颜色直方图；

计算指示每个像素的概率的概率图，所述概率指示相应像素是否是图像背景的一部分，所述概率图是基于所述颜色直方图计算的；

基于所述图像帧和所述概率图生成所述物品的第一无背景图像；

从所述移动设备接收用户输入，所述用户输入包括定义所述图像帧的多个像素的涂鸦；

基于所述涂鸦调整所述概率图；

基于所述第一无背景图像和调整后的概率图生成所述物品的第二无背景图像；以及

使用所述第二无背景图像在所述移动设备上展示所述物品。

2.根据权利要求1所述的方法，

其中，生成所述物品的所述第一无背景图像包括：

估计所述图像帧的第一区域的边界和第二区域的边界；

确定所述第一区域比所述第二区域包括所述物品的更大部分；

在所述移动设备的用户界面上显示指令，指示所述用户采取动作，使得所述物品将变得完全包括在所述第一区域的边界内并且在所述第一区域的边界内可见；以及

检测所述物品被完全包括在所述第一区域的边界内并且在所述第一区域的边界内可见；

检测所述第一区域内的所述物品的边界，所述物品的边界沿着用户界面上所述物品的轮廓，所述边界的内部部分仅包括所述物品，并且所述边界的外部部分包括所述图像帧的背景；

区分所述边界的内部部分和所述边界的外部部分；

估计第一二进制掩码，所述第一二进制掩码包括所述图像帧的所述边界的内部部分和所述边界的外部部分，其中，计算所述图像帧的所述颜色直方图包括所述边界的内部部分和所述边界的外部部分，其中，计算所述图像帧的所述概率图包括所述边界的内部部分和所述边界的外部部分；以及

平滑包括所述边界的内部部分和所述边界的外部部分的所述概率图。

3.根据权利要求2所述的方法，还包括：

获得第二二进制掩码，将第一二进制值分配给所述图像帧内具有高于确定的阈值的RGB值的第一多个像素中的每个像素，并且将第二二进制值分配给所述图像帧内具有低于所述确定的阈值的RGB值的第二多个像素中的每个像素；以及

获得第一无背景物品图像，将所述第二二进制掩码应用于所述图像帧。

4.根据权利要求3 所述的方法，还包括：

平滑所述涂鸦；以及

缩放所述涂鸦，包括：将所述第一二进制值分配给包括所述涂鸦的、具有高于所述确定的阈值的RGB值的第三多个像素中的每个像素，并且将所述第二二进制值分配给具有低于所述确定的阈值的RGB值的每个像素。

5.根据权利要求4所述的方法，还包括：

获得第三二进制掩码，包括：将缩放后的涂鸦与所述概率图区分开，向所述概率图添加或从其减去包括所述缩放后的涂鸦的像素的二进制值；以及

获得第二无背景物品图像，将第三二进制掩码应用于所述第一无背景物品图像。

6.根据权利要求1所述的方法，还包括：

从所述图像帧推断物品信息并且自动将所推断的物品信息应用于物品列表表单，以及基于所述物品列表表单生成所述物品列表。

7.根据权利要求1所述的方法，还包括：在所述移动设备的用户界面上的表示层中显示来自所述图像帧的所述物品。