[发明专利]图像处理方法及装置、电子设备和存储介质

说明书

本公开涉及一种图像处理方法及装置、电子设备和存储介质，所述方法包括：对第一色彩图像进行目标特征提取处理，获得目标对象的目标特征信息；将第一时刻获取的动态视觉信息输入第一特征提取网络，获得第一特征图；根据目标特征信息和第一特征图，确定目标对象在第一时刻的位置信息。根据本公开的实施例的图像处理方法，可利用获取频率较高的动态视觉信息获得第一特征图，并基于第一特征图来确定目标对象在获取到动态视觉信息的第一时刻的位置信息。由于动态视觉信息的频率高于色彩图像的获取频率，可通过第一特征图确定两帧色彩图像之间的时间段中的多个时刻的位置信息，有助于对运动物体的运动轨迹或动作进行跟踪。

技术领域

本公开涉及计算机技术领域，尤其涉及一种图像处理方法及装置、电子设备和存储介质。

背景技术

在相关技术中，相机或摄像头采集图像或视频帧的帧频不高，在对高速运动的目标进行跟踪时，目标在两帧之间的时间段中的动作难以被跟踪，进而导致遗漏目标的动作或轨迹，使得跟踪效果不佳。

发明内容

本公开提出了一种图像处理方法及装置、电子设备和存储介质。

根据本公开的一方面，提供了一种图像处理方法，包括：对第一时间段内获取的预设场景的第一色彩图像中的目标区域进行目标特征提取处理，获得所述第一色彩图像中目标对象的目标特征信息；将所述第一时间段内的第一时刻获取的所述预设场景的动态视觉信息输入第一特征提取网络，获得与所述第一时刻的动态视觉信息对应的第一特征图，其中，动态视觉信息的获取频率高于色彩图像的获取频率，所述第一特征提取网络是通过第二特征提取网络训练的，所述第二特征提取网络用于提取色彩图像的特征图；根据所述目标特征信息和所述第一特征图，确定所述目标对象在所述第一时刻的位置信息，其中，所述目标对象为所述预设场景中的任意对象。

在一种可能的实现方式中，根据所述目标特征信息和所述第一特征图，确定所述目标对象在所述第一时刻的位置信息，包括：根据所述目标特征信息确定卷积核参数；根据所述卷积核参数对所述第一特征图进行卷积处理，得到所述目标特征信息与所述第一特征图之间的相关热力图；根据所述相关热力图，确定所述目标对象在所述第一时刻的位置信息。

在一种可能的实现方式中，所述方法还包括：对所述第一特征图进行解码处理，获得第一时刻的第二色彩图像。

在一种可能的实现方式中，所述方法还包括：根据所述位置信息，对所述第二色彩图像中的目标对象进行分割处理，获得所述目标对象的分割掩码图。

在一种可能的实现方式中，对预设场景的第一时间段内的第一色彩图像中的目标区域进行目标特征提取处理，获得所述第一色彩图像中目标对象的目标特征信息，包括：对所述第一色彩图像进行目标检测处理，获得所述目标对象所在的目标区域；对所述目标区域进行目标特征提取处理，获得所述目标特征信息。

在一种可能的实现方式中，所述方法还包括：通过预训练的第二特征提取网络对样本场景的样本色彩图像进行特征提取处理，获得第一样本特征图；通过第一特征提取网络对所述样本场景的样本动态视觉信息进行特征提取处理，获得第二样本特征图，其中，所述样本动态视觉信息与所述样本色彩图像同时获取；根据所述第一样本特征图和所述第二样本特征图，确定第一特征提取网络的网络损失；根据所述网络损失，训练所述第一特征提取网络。

在一种可能的实现方式中，所述第一特征提取网络包括脉冲神经网络，所述第二特征提取网络包括卷积神经网络。