[发明专利]目标处理方法、目标处理模型的训练方法及其装置

权利要求书

1.一种目标处理方法，包括：

获取当前图像帧以及参考实例分割图；

根据所述参考实例分割图，确定所述参考实例分割图对应的参考图像帧中各个像素属于相应实例的概率，并生成参考语义热力图；

获取所述参考图像帧的全局上下文向量，并根据所述全局上下文向量、所述当前图像帧和所述参考语义热力图，生成特征图；

根据所述特征图，生成所述当前图像帧对应的语义种子图以及至少一种处理方式的偏移图，其中，所述语义种子图包括：所述当前图像帧中各个实例的边界信息以及中心信息；

提取所述语义种子图中的中心信息，生成实例中心图；

根据所述实例中心图以及所述至少一种处理方式的偏移图，生成所述当前图像帧在所述至少一种处理方式下的目标处理结果。

2.根据权利要求1所述的方法，其中，所述获取当前图像帧以及参考实例分割图，包括：

获取图像序列中的所述当前图像帧；

获取所述图像序列中位于所述当前图像帧之前的历史图像帧；

将所述历史图像帧的实例分割图，确定为所述参考实例分割图。

3.根据权利要求1所述的方法，其中，所述处理方式包括：实例分割方式，所述实例分割方式的偏移图包括：所述当前图像帧中各个像素相对于相应实例中心的偏移信息；

所述根据所述实例中心图以及所述至少一种处理方式的偏移图，生成所述当前图像帧在所述至少一种处理方式下的目标处理结果，包括：

根据所述实例中心图中各个实例中心的位置信息，以及所述当前图像帧中各个像素相对于相应实例中心的偏移信息，确定所述当前图像帧中各个实例的位置信息；

根据所述当前图像帧中各个实例的位置信息，确定所述当前图像帧在实例分割方式下的实例分割结果。

4.根据权利要求1或3所述的方法，其中，所述处理方式包括：边框检测方式，所述边框检测方式的偏移图包括：所述当前图像帧中各个实例的边框顶点相对于相应实例中心的偏移信息；

所述根据所述实例中心图以及所述至少一种处理方式的偏移图，生成所述当前图像帧在所述至少一种处理方式下的目标处理结果，包括：

根据所述实例中心图中各个实例中心的位置信息，以及所述当前图像帧中各个实例的边框顶点相对于相应实例中心的偏移信息，确定所述当前图像帧中各个实例的边框信息；

根据所述当前图像帧中各个实例的边框信息，确定所述当前图像帧在边框检测方式下的边框检测结果。

5.根据权利要求4所述的方法，其中，所述处理方式包括：目标跟踪方式，所述目标跟踪方式的偏移图包括：所述当前图像帧中各个实例的中心相对于所述参考实例分割图中相应实例的中心的偏移信息；

所述根据所述实例中心图以及所述至少一种处理方式的偏移图，生成所述当前图像帧在所述至少一种处理方式下的目标处理结果，包括：

根据所述实例中心图中各个实例中心的位置信息，以及所述当前图像帧中各个实例的中心相对于所述参考实例分割图中相应实例的中心的偏移信息，确定所述当前图像帧中各个实例的位置信息；

根据所述当前图像帧中各个实例的位置信息，确定所述当前图像帧在所述目标跟踪方式下的目标跟踪结果。