[发明专利]关键点检测方法、装置、存储介质及电子设备

权利要求书

1.一种关键点检测方法，包括：

根据视频序列包括的第一视频帧和第二视频帧获取视频光流数据，所述视频光流数据用于指示在所述第二视频帧和第一视频帧之间各个像素的位移数据，所述第二视频帧包括所述视频序列中时序连续且位于所述第一视频帧之前的至少一个视频帧；

根据已获得的所述第二视频帧中目标对象的第二关键点数据和所述视频光流数据，获取所述第一视频帧中所述目标对象的第一关键点数据。

2.根据权利要求1所述的方法，其中，所述根据视频序列包括的第一视频帧和第二视频帧获取视频光流数据，包括：

通过用于生成视频光流数据的深度神经网络，根据所述第一视频帧和所述第二视频帧获取视频光流数据。

3.根据权利要求1或2所述的方法，其中，所述根据已获得的所述第二视频帧中目标对象的第二关键点数据和所述视频光流数据，获取所述第一视频帧中目标对象的第一关键点数据，包括：

根据已获得的所述第二视频帧中目标对象的第二关键点数据，以所述第二关键点为中心选取若干第二像素；

根据所述视频光流数据所指示的所述第二视频帧和所述第一视频帧之间的所述第二像素的位移数据，获取所述若干第二像素在所述第一视频帧中各自对应的第一像素的数据；

根据若干所述第一像素的数据，获取所述第二视频帧中所述目标对象的第一关键点数据。

4.根据权利要求2或3所述的方法，其中，在通过用于生成视频光流数据的深度神经网络，根据所述第一视频帧和所述第二视频帧获取视频光流数据之前，所述方法还包括：

使用多个样本视频帧序列训练所述深度神经网络，所述样本视频帧序列中的每个样本视频帧含有视频光流数据的标注信息。

5.根据权利要求1～4中任一项所述的方法，其中，所述视频光流数据为光流图，所述光流图中的部分像素与所述第一视频帧中的像素和第二视频帧中的像素对应，并指示所述第一视频帧中的像素相对于所述第二视频帧中的对应像素的位移信息。

6.根据权利要求2～5中任一项所述的方法，其中，所述深度神经网络为全卷积神经网络。

7.根据权利要求1～6中任一项所述的方法，其中，所述第一关键点和第二关键点均为人体的关键点，或者均为人脸的关键点。

8.一种关键点检测装置，包括：

第一获取模块，用于根据视频序列包括的第一视频帧和第二视频帧获取视频光流数据，所述视频光流数据用于指示在所述第二视频帧和第一视频帧之间各个像素的位移数据，所述第二视频帧包括所述视频序列中时序连续且位于所述第一视频帧之前的至少一个视频帧；

第二获取模块，用于根据已获得的所述第二视频帧中目标对象的第二关键点数据和所述视频光流数据，获取所述第一视频帧中所述目标对象的第一关键点数据。

9.一种电子设备，包括：处理器、存储器、通信元件和通信总线，所述处理器、所述存储器和所述通信元件通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1～7中任一所述的关键点检测方法对应的操作。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有用于执行如权利要求1～7中任一项所述的关键点检测方法对应的操作的可执行指令。