[发明专利]基于生成网络的光学-雷达ISAR图像转换方法及装置

权利要求书

1.基于生成网络的光学-雷达ISAR图像转换方法，其特征在于，所述方法包括：

获取图像训练集，所述图像训练集中包括具有相同目标类别的多张ISAR原图像以及光学图像；

将所述图像训练集中的ISAR原图像以及光学图像输入生成网络，所述ISAR原图像由所述生成网络中的第一生成器从ISAR图像域映射至光学图像域转化为对应的伪光学图像，再由第二生成器件所述伪光学图像从光学图像域映射ISAR图像域转化为对应的ISAR重构图像，同时，所述光学图像由所述第二生成器转化为伪ISAR图像，再由所述第一生成器件将所述伪ISAR图像转化为光学重构图像；

分别对所述ISAR原图像以及对应ISAR重构图像的散射点进行提取，得到ISAR原图像的第一散射点位置矩阵以及ISAR重构图像的第二散射点位置矩阵；

将所述第一散射点位置矩阵以及ISAR重构图像的第二散射点位置矩阵相等作为约束条件，并基于增广拉格朗日算子的形式将所述约束条件作为罚函数项加入原损失函数中对其进行重构得到最终的损失函数；

根据最终的所述损失函数对所述生成网络进行训练，得到训练好的生成网络；

获取待转换光学目标图像，利用所述训练好的生成网络中的第二生成器对所述待转换光学目标图像进行转换，得到对应的ISAR转换图像。

2.根据权利要求1所述的光学-雷达ISAR图像转换方法，其特征在于，分别对所述ISAR原图像以及对应ISAR重构图像的散射点进行提取时，根据最大类间方差法以及网络法对ISAR图像的散射点进行提取。

3.根据权利要求2所述的光学-雷达ISAR图像转换方法，其特征在于，所述根据最大类间方差法以及网络法对ISAR图像的散射点进行提取包括：

根据所述最大类间方差法计算出所述ISAR图像的灰度阈值，根据该灰度阈值对ISAR图像进行分割得到的前景和后景分离度最高；

再根据网络法以及灰度阈值对ISAR图像的散射点进行提取。

4.根据权利要求3所述的光学-雷达ISAR图像转换方法，其特征在于，所述根据网络法以及灰度阈值对ISAR图像的散射点进行提取包括：

对所述ISAR图像划分为多个大小尺寸相同的网络；

分别在各网络中提取幅度值大于所述灰度阈值的像素点作为散射点，并记录各所述散射点的对应坐标以及幅度值；

根据记录的各所述散射点的对应坐标按照原坐标的顺序进行重构得到散射点位置矩阵。

5.根据权利要求4所述的光学-雷达ISAR图像转换方法，其特征在于，所述生成网络采用循环生成对抗网络，还包括ISAR图像域的判别器以及光学图像域的判别器，其中所述第一生成器以及第二生成器采用CNN结构实现，两个所述判别器采用PatchGAN结构实现。

6.根据权利要求5所述的光学-雷达ISAR图像转换方法，其特征在于，所述原损失函数为：

7.根据权利要求6所述的光学-雷达ISAR图像转换方法，其特征在于，所述最终的损失函数为：

在上式中，λ_scatter表示拉格朗日乘子，ρ_scatter表示罚函数项系数。

8.根据权利要求7所述的光学-雷达ISAR图像转换方法，其特征在于，根据所述最终的损失函数对所述生成网络进行训练，得到训练好的生成网络还包括：

对所述最终的损失函数进行梯度计算，根据计算结果方向修正生成网络中的第一生成器以及第二生成器的参数，直至收敛，得到训练好的生成网络。

9.基于生成网络的光学-雷达ISAR图像转换装置，其特征在于，所述装置包括：

训练集获取模块，用于获取图像训练集，所述图像训练集中包括具有相同目标类别的多张ISAR原图像以及光学图像；

图像域转换模块，用于将所述图像训练集中的ISAR原图像以及光学图像输入生成网络，所述ISAR原图像由所述生成网络中的第一生成器从ISAR图像域映射至光学图像域转化为对应的伪光学图像，再由第二生成器件所述伪光学图像从光学图像域映射ISAR图像域转化为对应的ISAR重构图像，同时，所述光学图像由所述第二生成器转化为伪ISAR图像，再由所述第一生成器件将所述伪ISAR图像转化为光学重构图像；

散射点位置矩阵重构模块，用于分别对所述ISAR原图像以及对应ISAR重构图像的散射点进行提取，得到ISAR原图像的第一散射点位置矩阵以及ISAR重构图像的第二散射点位置矩阵；

损失函数重构模块，用于将所述第一散射点位置矩阵以及ISAR重构图像的第二散射点位置矩阵相等作为约束条件，并基于增广拉格朗日算子的形式将所述约束条件作为罚函数项加入原损失函数中对其进行重构得到最终的损失函数；

网络训练模块，用于根据最终的所述损失函数对所述生成网络进行训练，得到训练好的生成网络；

光学-雷达ISAR图像转换模块，用于获取待转换光学目标图像，利用所述训练好的生成网络中的第二生成器对所述待转换光学目标图像进行转换，得到对应的ISAR转换图像。