[发明专利]基于光场语义的个体匹配方法、装置、设备和介质

权利要求书

1.一种基于光场语义的个体匹配方法，其特征在于，所述方法包括：

获取包含不同视角的光场图像集；

选取任一视角的光场图像进行不同深度的重对焦以形成对焦图像集，对各对焦图像进行语义分析得到不同个体的对焦语义分割；

依据各所述对焦语义分割的结果对属于同类的所述个体进行聚类以获得各所述个体于不同所述对焦图像上的深度值范围；

对其他视角下的所述光场图像进行语义分析，以得到各视角下各对应不同所述个体的原始语义分割；

依据所述对焦图像集上各所述个体对应的所述深度值范围通过重投影将各所述个体对应的所述对焦语义分割的结果映射到各视角下以形成映射语义分割；

通过所述原始语义分割与所述映射语义分割的相似度对比获得各视角下各所述个体的对应关系。

2.根据权利要求1所述的方法，其特征在于，所述光场图像集是由相机阵列对应一场景拍摄得到的多视角图像组成。

3.根据权利要求1所述的方法，其特征在于，所述重对焦中依据均值等分选取不同对焦深度。

4.根据权利要求1所述的方法，其特征在于，所述对各对焦图像进行语义分析得到不同个体的对焦语义分割的方法包括：

依据目标检测找到各所述个体，并通过边界框对各所述个体进行语义标记与分割；

计算各所述个体对应的语义置信度、及聚焦度，据以得到对应所述对焦图像的对焦语义分割的质量分布。

5.根据权利要求4所述的方法，其特征在于，所述依据各所述对焦语义分割的结果对属于同类的所述个体进行聚类的方法包括：

任选两个所述个体，依据各所述个体对应的所述边界框之间差距、及深度值之间差距粗估两个所述个体的相似度，以判断两个所述个体是否属于同类。

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

依据各所述个体于不同所述对焦图像上的深度值范围作为聚类后所述个体的深度值范围；

选取各所述个体的聚类中所述质量分布最高的个体、通过语义分析得到所述个体对应的语义信息、及对应所述个体的深度值范围作为各所述个体的所述对焦语义分割的结果。

7.根据权利要求1所述的方法，其特征在于，所述依据所述对焦图像集上各所述个体对应的所述深度值范围通过重投影将各所述个体对应的所述对焦语义分割的结果映射到各视角下以形成映射语义分割的方法包括：

针对其他目标视角下所述光场图像中每一个像素找到其在重对焦视角下所述对焦图像集中不同对焦深度下的像素；

选取对焦深度最小且不属于背景的所述语义信息作为目标视角下当前像素的语义信息。

8.根据权利要求1所述的方法，其特征在于，所述通过所述原始语义分割与所述映射义分割的相似度对比获得各视角下所述个体的对应关系的方法包括：

将所述原始语义分割与所述映射义分割的相似度对比值与预设值比较；

若小于所述预设值，则选择所述映射语义分割的结果表示各视角下所述个体对应的语义分割结果；

依据各视角下各所述个体的语义分割结果，以获得各视角下各所述个体的对应关系。

9.根据权利要求8所述的方法，其特征在于，各所述个体的所述深度值范围对应有视差范围，所述视差范围能够作为立体匹配时的视差搜索区间，以缩减所述立体匹配的计算时间。