[发明专利]一种视频帧图像分割方法、装置、电子设备及存储介质

权利要求书

1.一种视频帧图像分割方法，其特征在于，包括：

获取待处理视频帧的上一视频帧与所述上一视频帧的语义分割结果；

对所述上一视频帧的语义分割结果进行边界模糊处理，得到模糊后的边界图像；

将所述待处理视频帧、所述模糊后的边界图像、所述上一视频帧输入到预先训练的网络模型中，得到所述待处理视频帧的语义分割结果。

2.根据权利要求1所述的方法，其特征在于，所述预先训练的网络模型的训练方法包括：

步骤A，获取待处理视频帧的上一帧图像与所述上一帧图像的语义分割结果，其中，所述待处理视频帧标记有标准语义分割结果；

步骤B，对所述上一帧图像的语义分割结果进行边界模糊处理，得到模糊处理后的目标模糊边界图像；

步骤C，将所述目标模糊边界图像、所述上一帧图像、所述待处理视频帧输入到网络模型中得到所述待处理视频帧的语义分割结果；

步骤D，计算所述待处理视频帧的语义分割结果与所述标准语义分割结果的误差；

步骤E，根据所述误差，判断所述网络模型是否收敛，若所述网络模型收敛，得到训练好的网络模型，若所述网络模型没有收敛，调整所述网络模型的参数继续对所述网络模型进行训练直至收敛。

3.根据权利要求1所述的方法，其特征在于，所述对所述上一视频帧的语义分割结果进行边界模糊处理，得到模糊后的边界图像，包括：

对所述上一视频帧的语义分割结果的边界扩大为预设像素宽度，得到模糊后的边界图像。

4.根据权利要求3所述的方法，其特征在于，所述对所述上一视频帧的语义分割结果的边界扩大为预设像素宽度，得到模糊后的边界图像，包括：

对所述上一视频帧的语义分割结果的边界向内扩大预设像素宽度，得到模糊后的边界图像；

或，对所述上一视频帧的语义分割结果的边界向外扩大预设像素宽度，得到模糊后的边界图像；

或，对所述上一视频帧的语义分割结果的边界向内扩大第一像素宽度，向外扩大第二像素宽度，得到模糊后的边界图像，其中，所述第一像素宽度与所述第二像素宽度的和为所述预设像素宽度。

5.根据权利要求1所述的方法，其特征在于，所述将所述待处理视频帧、所述模糊后的边界图像、所述上一视频帧输入到预先训练的网络模型中，得到所述待处理视频帧的语义分割结果之前，所述方法还包括：

根据所述待处理视频帧、所述模糊后的边界、所述上一视频帧，将所述待处理视频帧与所述上一视频帧进行数据预处理，其中，经过数据预处理后的所述待处理视频帧与所述上一视频帧之间的差异增大。

6.根据权利要求5所述的方法，其特征在于，所述数据预处理包括：位移变化、尺度变化、旋转变化、薄板样条变化中的一种或多种。

7.根据权利要求1所述的方法，其特征在于，所述将所述待处理视频帧、所述模糊后的边界图像、所述上一视频帧输入到预先训练的网络模型中，得到所述待处理视频帧的语义分割结果之后，所述方法还包括：

根据所述语义分割结果确定所述待处理视频帧中的前景目标及所述前景目标的位置；

按照所述前景目标的位置，将所述前景目标添加到预设背景图像中的相应位置，得到替换后的视频帧。

8.一种视频帧图像分割装置，其特征在于，包括：

结果获取模块，用于获取待处理视频帧的上一视频帧与所述上一视频帧的语义分割结果；

模糊处理模块，用于对所述上一视频帧的语义分割结果进行边界模糊处理，得到模糊后的边界图像；

网络模型模块，用于将所述待处理视频帧、所述模糊后的边界图像、所述上一视频帧输入到预先训练的网络模型中，得到所述待处理视频帧的语义分割结果。

9.一种电子设备，其特征在于，包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器被配置为执行所述指令，以实现如权利要求1至7中任一项所述的视频帧图像分割方法。

10.一种存储介质，当所述存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1至7中任一项所述的视频帧图像分割方法。