[发明专利]动态图像的生成方法、装置、存储介质及电子设备

权利要求书

1.一种动态图像的生成方法，包括：

获取源视频包含的第一对象的第一关键点，以及目标图像包含的第二对象的第二关键点；

基于所述第一关键点以及所述第二关键点确定中立关键点的第一运动轨迹，所述中立关键点表征以下至少一项：不同对象展现不同人脸表情时相同的人脸特征、所述不同对象进行不同肢体动作时相同的人体特征；

将所述第一运动轨迹映射在所述目标图像上，得到运动光流信息；

基于所述运动光流信息对所述第二对象进行驱动，生成目标动态图；

其中，所述基于所述第一关键点以及所述第二关键点确定中立关键点的第一运动轨迹，包括：

从所述源视频包含的所有源图像中提取所述第一关键点，得到关键点序列；

基于所述第一关键点以及所述第二关键点，生成所述中立关键点；

从所述源图像中确定参考帧图像；

提取所述参考帧图像对应的关键点，得到参考关键点；

基于所述参考关键点以及所述关键点序列中的其他关键点确定第二运动轨迹，其中，所述其他关键点为所述关键点序列中除所述参考关键点之外的关键点；

根据所述第二运动轨迹确定所述第一运动轨迹。

2.根据权利要求1所述的方法，其中，所述基于所述第一关键点以及所述第二关键点，生成所述中立关键点，包括：

对所述第一关键点和所述第二关键点进行特征聚合，得到聚合特征；

基于所述聚合特征构建所述第一关键点与所述第二关键点之间的聚合关键点，所述中立关键点包括所述聚合关键点。

3.根据权利要求1所述的方法，其中，所述从所述源图像中确定参考帧图像，包括：

获取所述源图像所对应的中立关键点；

计算所述中立关键点与所述第二关键点的相似度，得到所述源图像所对应的关键点相似度；

从所述源图像中确定所述关键点相似度最大的图像，得到所述参考帧图像。

4.根据权利要求1所述的方法，其中，所述基于所述运动光流信息对所述第二对象进行驱动，生成目标动态图，包括：

基于所述运动光流信息对所述第二对象的人脸或人体进行对象驱动，得到初始动态图；

基于所述运动光流信息确定所述初始动态图中的缺失区域，其中，所述缺失区域为所述源视频中不存在，且所述初始动态图中存在的图像区域；

对所述缺失区域进行补全操作，得到所述目标动态图。

5.一种动态图像的生成装置，包括：

获取模块，用于获取源视频包含的第一对象的第一关键点，以及目标图像包含的第二对象的第二关键点；

确定模块，用于基于所述第一关键点以及所述第二关键点确定中立关键点的第一运动轨迹，所述中立关键点表征以下至少一项：不同对象展现不同人脸表情时相同的人脸特征、所述不同对象进行不同肢体动作时相同的人体特征；

映射模块，用于将所述第一运动轨迹映射在所述目标图像上，得到运动光流信息；

生成模块，用于基于所述运动光流信息对所述第二对象进行驱动，生成目标动态图；

其中，所述确定模块包括：

第一提取模块，用于从所述源视频包含的所有源图像中提取所述第一关键点，得到关键点序列；

第一生成模块，用于基于所述第一关键点以及所述第二关键点，生成所述中立关键点；

第一确定模块，用于从所述源图像中确定参考帧图像；

第二提取模块，用于提取所述参考帧图像对应的关键点，得到参考关键点；

第二确定模块，用于基于所述参考关键点以及所述关键点序列中的其他关键点确定第二运动轨迹，其中，所述其他关键点为所述关键点序列中除所述参考关键点之外的关键点；

第三确定模块，用于根据所述第二运动轨迹确定所述第一运动轨迹。

6.根据权利要求5所述的装置，其中，所述第一生成模块包括：

特征聚合模块，用于对所述第一关键点和所述第二关键点进行特征聚合，得到聚合特征；

构建模块，用于基于所述聚合特征构建所述第一关键点与所述第二关键点之间的聚合关键点，所述中立关键点包括所述聚合关键点。