[发明专利]动作识别方法、装置、设备及存储介质

权利要求书

1.一种动作识别方法，其特征在于，所述方法包括：

获取待识别的视频序列；

将所述视频序列划分为T个视频段，所述T为大于1的整数；

通过特征提取网络对所述T个视频段进行特征提取处理，得到所述T个视频段各自对应的图像特征；

根据所述T个视频段各自对应的图像特征之间的差异度，对所述T个视频段各自对应的图像特征进行特征融合处理，得到目标视频特征；

根据所述目标视频特征，确定所述视频序列中运动目标的动作类别。

2.根据权利要求1所述的方法，其特征在于，在所述通过特征提取网络对所述T个视频段进行特征提取处理，得到所述T个视频段各自对应的图像特征之后，所述方法还包括：

按照所述T个视频段的时间顺序，排列所述T个视频段各自对应的图像特征，得到所述T个视频段对应的图像特征；所述T个视频段对应的图像特征包括C个特征通道，所述C为大于1的整数；

在所述C个特征通道的方向上，将所述T个视频段对应的图像特征划分为X个子图像特征，所述X为大于1的整数；所述子图像特征包括M个特征通道，所述M为小于C的正整数；

则所述根据所述T个视频段各自对应的图像特征之间的差异度，对所述T个视频段各自对应的图像特征进行信息融合处理，得到目标视频特征，包括：

针对所述X个子图像特征中的每个子图像特征，根据所述子图像特征中所述T个视频段各自对应的图像特征之间的差异度，对所述子图像特征中所述T个视频段各自对应的图像特征进行特征偏移处理，得到所述子图像特征对应的目标子图像特征；

拼接所述X个子图像特征各自对应的目标子图像特征得到所述目标视频特征。

3.根据权利要求2所述的方法，其特征在于，所述根据所述子图像特征中所述T个视频段各自对应的图像特征之间的差异度，对所述子图像特征中所述T个视频段各自对应的图像特征进行特征偏移处理，得到所述子图像特征对应的目标子图像特征，包括：

根据所述子图像特征中第t+1个视频段对应的图像特征与第t个视频段对应的图像特征之间的差值，确定所述子图像特征对应的段间差特征；所述t为大于等于1、且小于所述T的整数；

基于所述段间差特征，对所述子图像特征中所述T个视频段各自对应的图像特征进行特征偏移处理，得到所述目标子图像特征。

4.根据权利要求3所述的方法，其特征在于，所述基于所述段间差特征，对所述子图像特征中所述T个视频段各自对应的图像特征进行特征偏移处理，得到所述目标子图像特征，包括：

根据所述子图像特征对应的所述段间差特征，确定所述子图像特征对应的通道偏移系数；

根据为所述子图像分配的特征偏移方向、所述通道偏移系数以及所述子图像特征，在所述M个特征通道上对所述子图像特征中所述T个视频段各自对应的图像特征进行偏移处理，得到所述目标子图像特征。

5.根据权利要求4所述的方法，其特征在于，所述根据所述子图像特征对应的所述段间差特征，确定所述子图像特征对应的通道偏移系数，包括：

通过目标函数根据所述子图像特征对应的所述段间差特征，确定所述子图像特征对应的通道偏移系数；所述通道偏移系数与所述段间差特征成正比，所述通道偏移系数大于等于0、且小于等于1。

6.根据权利要求4或5所述的方法，其特征在于，所述根据为所述子图像分配的特征偏移方向、所述通道偏移系数以及所述子图像特征，在所述M个特征通道上对所述子图像特征中所述T个视频段各自对应的图像特征进行偏移处理，得到所述目标子图像特征，包括：

基于所述通道偏移系数调整所述子图像特征，得到参考子图像特征；

沿着为所述子图像特征分配的特征偏移方向，在所述M个特征通道上对所述参考子图像特征中所述T个视频段各自对应的图像特征进行特征偏移处理，得到特征偏移处理后的参考子图像特征；

根据所述特征偏移处理后的参考子图像特征、所述参考子图像特征和所述子图像特征，确定所述目标子图像特征。