[发明专利]卫星视频目标跟踪方法、网络的训练方法及系统

权利要求书

1.一种卫星视频目标跟踪方法，包括：

获取相邻的多个待测卫星视频帧；

将所述多个待测卫星视频帧输入至卫星视频目标跟踪网络的视频域图映射模块中，生成全连通图，其中，所述全连通图包括多个节点和边，所述节点用于表征所述待测卫星视频帧中的目标对象，所述边用于表征两个所述目标对象彼此之间的关联关系；

将所述全连通图输入至所述卫星视频目标跟踪网络的时空图推理模块中，得到多个所述目标对象各自的检测框和身份标识信息。

2.根据权利要求1所述的方法，其中，所述时空图推理模块包括图卷积层、门控加权层、全连接层；

所述将所述全连通图输入至所述卫星视频目标跟踪网络的时空图推理模块中，生成多个所述目标对象各自的检测框和身份标识信息，包括：

将所述全连通图输入至所述图卷积层进行引导语义滤波，得到目标关联语义特征；

将所述目标关联语义特征输入至所述门控加权层进行语义聚合，得到目标时空语义特征；

将所述目标时空语义特征输入至所述全连接层进行映射变换，得到所述多个目标对象各自的检测框和身份标识信息。

3.根据权利要求1所述的方法，其中，所述视频域图映射模块包括卷积层、特征提取层、生成层；

将所述多个待测卫星视频帧输入至卫星视频目标跟踪网络的视频域图映射模块中，生成全连通图，包括：

将所述多个待测卫星视频帧输入至所述卷积层进行特征提取，得到多个所述待测卫星视频帧各自的目标特征；

将多个所述待测卫星视频帧各自的目标特征输入至所述特征提取层，得到关联矩阵；

将所述关联矩阵输入至所述生成层，得到所述全连通图。

4.根据权利要求1所述的方法，其中，所述获取相邻的多个待测卫星视频帧，包括：

从本地存储设备中获取待测卫星视频；

对所述待测卫星视频进行拆帧，得到所述多个待测卫星视频帧。

5.根据权利要求4所述的方法，其中，所述待测卫星视频存储格式包括：动态图像专家组格式、音频视频交错格式以及实时媒体播放可变比特率格式。

6.根据权利要求1所述的方法，还包括：

在所述待测卫星视频帧上显示所述目标对象的检测框和身份标识信息。

7.根据权利要求1所述的方法，还包括：

将多个所述目标对象各自的检测框和身份标识信息存储至本地存储设备中。

8.一种卫星视频目标跟踪网络的训练方法，包括：

获取相邻的多个样本卫星视频帧和所述多个样本卫星视频帧各自的标签；

将所述多个样本卫星视频帧输入至卫星视频目标跟踪网络的视频域图映射模块中，生成样本全连通图，其中，所述样本全连通图包括多个节点和边，所述节点用于表征所述样本卫星视频帧中的目标对象，所述边用于表征两个所述目标对象彼此之间的关联关系；

将所述样本全连通图输入至所述卫星视频目标跟踪网络的时空图推理模块中，生成多个所述目标对象各自的检测框和身份标识信息；

利用多个所述目标对象各自的检测框和身份标识信息和所述多个样本卫星视频帧各自的标签训练所述卫星视频目标跟踪网络，得到经训练的卫星视频目标跟踪网络。

9.一种卫星视频目标跟踪系统，包括：

数据获取模块，用于获取相邻的多个待测卫星视频帧；

图构建模块，用于将所述多个待测卫星视频帧输入至卫星视频目标跟踪网络的视频域图映射模块中，生成全连通图，其中，所述全连通图包括多个节点和边，所述节点用于表征所述待测卫星视频帧中的目标对象，所述边用于表征两个所述目标对象彼此之间的关联关系；

跟踪模块，用于将所述全连通图输入至所述卫星视频目标跟踪网络的时空图推理模块中，得到多个所述目标对象各自的检测框和身份标识信息。

10.一种卫星视频目标跟踪网络的训练系统，包括：

样本获取模块，用于获取相邻的多个样本卫星视频帧和所述多个样本卫星视频帧各自的标签；

样本图构建模块，用于将所述多个样本卫星视频帧输入至卫星视频目标跟踪网络的视频域图映射模块中，生成样本全连通图，其中，所述样本全连通图包括多个节点和边，所述节点用于表征所述样本卫星视频帧中的目标对象，所述边用于表征两个所述目标对象彼此之间的关联关系；

训练跟踪模块，用于将所述样本全连通图输入至所述卫星视频目标跟踪网络的时空图推理模块中，生成多个所述目标对象各自的检测框和身份标识信息；

网络确定模块，用于利用多个所述目标对象各自的检测框和身份标识信息和所述多个样本卫星视频帧各自的标签训练所述卫星视频目标跟踪网络，得到经训练的卫星视频目标跟踪网络。