[发明专利]基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法

权利要求书

1.基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法，其特征在于包括以下步骤：

步骤一：获取待识别场景的仿真场景V_{_Sim}及仿真场景V_{_Sim}的标签V_{_Label}，然后利用仿真场景V_{_Sim}和仿真场景V_{_Sim}的标签V_{_Label}得到仿真图像S_Image及仿真图像S_Image对应的真值S_Label，最后利用仿真图像S_Image和仿真图像S_Image对应的真值S_Label形成虚拟知识K_sim；

步骤二：根据虚拟知识K_sim获得建筑物整体和立面的检测框区域Boxes以及仿真图像S_Image中每个实例的注意力图r_k，并生成整幅图像的基底Bases，所述整幅图像的基底Bases中包含每个实例的基底s_k，所述步骤二中生成整幅图像的基底Bases通过BlendMask网络实现；

步骤三：将每个实例基底s_k与每个实例的注意力图r_k进行合并，得到掩模预测m_d，然后判断建筑物整体和立面的检测框区域Boxes中是否存在遮挡区域，若不存在遮挡区域，则将掩模预测m_d作为透视实例分割结果，若存在遮挡区域，则预测该遮挡区域的遮挡掩膜m_occ，然后将掩模预测m_d和遮挡掩模m_occ进行综合掩模，将综合掩模的结果作为透视实例分割结果；

步骤四：根据上述步骤得到预训练模型pre_model，利用预训练模型pre_model并加入部分真实遥感图像训练样本进行迁移学习，得到透视实例分割模型final_model，然后利用透视实例分割模型final_model完成建筑物及其遮挡区域单体化提取。

2.根据权利要求1所述的基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法，其特征在于所述仿真场景V_{_Sim}通过对待识别场景的地形，地物以及纹理信息进行映射得到。

3.根据权利要求1所述的基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法，其特征在于所述仿真图像S_Image和对应的真值S_Label通过对仿真场景V_{_Sim}及其标签V_{_Label}进行相同的投影模型P处理得到。

4.根据权利要求1所述的基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法，其特征在于所述步骤二中建筑物整体和立面的检测框区域Boxes以及图像中每个实例的注意力图r_k通过基于FCOS的目标检测器得到。

5.根据权利要求1所述的基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法，其特征在于所述步骤三中对每个实例基底s_k与注意力图r_k进行合并通过基于BlendMask的混合掩模策略实现。

6.根据权利要求1所述的基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法，其特征在于所述步骤三中判断建筑物整体和立面的检测框区域Boxes否存在遮挡区域通过遮挡判别网络进行。

7.根据权利要求1所述的基于虚拟知识迁移的建筑物及其遮挡区域单体化提取方法，其特征在于所述步骤三中预测该遮挡区域的遮挡掩膜m_occ通过遮挡判别网络进行。