[发明专利]用于对象的自动分割的方法和装置

说明书

技术领域

本实施例一般涉及图像处理。特别地，本实施例涉及来自多个图像的 对象的分割。

背景技术

多相机系统是在成像和媒体制作产业中，例如摄影、电影和游戏制作， 针对3D(三维)资产的获得的新兴技术。随着手持型成像设备，诸如便携 式摄影机和移动电话的扩张，来自由多个相机同时拍摄的图像的相同对象 的自动分割是用于捕获3D内容的方式。

发明内容

本发明的各种实施例包含方法、装置、系统和计算机可读介质，所述 计算机可读介质包括在其中存储的计算机程序，它们的特征在于独立权利 要求中所陈述的内容。在从属权利要求中公开了本发明的各种实施例。

根据第一示例，一种方法包括接收多个图像，其中所述多个图像包括 与相同对象有关的内容；预处理所述多个图像以形成针对图像中的每个区 域的特征向量；借助于所述特征向量来发现来自每个图像的像对象的区域； 根据所述像对象的区域来确定针对每个图像的对象外观模型；借助于所述 对象外观模型来生成对象假设；对所述多个图像中的相同对象进行分割以 生成分割的对象；以及根据所述分割的对象来生成多视图分割。

根据一个实施例，从多个相机设备来接收所述多个图像。

根据一个实施例，所述预处理包括针对所述多个图像执行区域提取。

根据一个实施例，所述预处理还包括在所述多个图像中执行从运动恢 复结构的技术以重构稀疏3D点。

根据一个实施例，用于借助于所述特征向量来发现来自每个图像的像 对象的区域的步骤包括形成包括来自所述多个图像的预定数量的最高评分 区域的池，其中区域的分数包括每个区域的外观分数和基于重构的稀疏3D 点的区域的可见度；通过累计考虑中的区域所包含的3D点的数量，来确 定区域的可见度；通过执行谱聚类来辨识表示前景对象的像对象的区域。

根据一个实施例，生成对象假设包括：确定所述多个图像中的区域的 对象性(objectness)水平；将每个帧具有最高对象性水平的分组的区域添 加到对象假设的集合。

根据一个实施例，所述分割包括确定属于对象的区域的似然值，基于 所述似然值来分割所述对象。

根据第二示例，一种装置包括至少一个处理器、包含计算机程序代码 的存储器，所述存储器和所述计算机程序代码被配置为使用所述至少一个 处理器，使得所述装置执行至少以下：接收多个图像，其中所述多个图像 包括与相同对象有关的内容；预处理所述多个图像以形成针对图像中的每 个区域的特征向量；借助于所述特征向量来发现来自每个图像的像对象的 区域；根据所述像对象的区域来确定针对每个图像的对象外观模型；借助 于所述对象外观模型来生成对象假设；对所述多个图像中的相同对象进行 分割以生成分割的对象；以及根据所述分割的对象来生成多视图分割。

根据第三示例，一种系统包括至少一个处理器、包含计算机程序代码 的存储器，所述存储器和所述计算机程序代码被配置为使用所述至少一个 处理器，使得所述系统执行至少以下：接收多个图像，其中所述多个图像 包括与相同对象有关的内容；预处理所述多个图像以形成针对图像中的每 个区域的特征向量；借助于所述特征向量来发现来自每个图像的像对象的 区域；根据所述像对象的区域来确定针对每个图像的对象外观模型；借助 于所述对象外观模型来生成对象假设；对所述多个图像中的相同对象进行 分割以生成分割的对象；以及根据所述分割的对象来生成多视图分割。

根据第四示例，一种装置包括：用于接收多个图像的构件，其中所述 多个图像包括与相同对象有关的内容；用于预处理所述多个图像以形成针 对图像中的每个区域的特征向量的构件；用于借助于所述特征向量来发现 来自每个图像的像对象的区域的构件；用于根据所述像对象的区域来确定 针对每个图像的对象外观模型的构件；用于借助于所述对象外观模型来生 成对象假设的构件；用于对所述多个图像中的相同对象进行分割以生成分 割的对象的构件；以及用于根据所述分割的对象来生成多视图分割的构件。