[发明专利]视频生成方法、装置、电子设备以及存储介质

说明书

本公开提供了一种视频生成方法、装置、电子设备以及存储介质，其中，该方法包括：获取待处理视频，其中，所述待处理视频中包含真实对象执行目标动作的视频画面；利用所述待处理视频中所述真实对象的目标肢体信息，确定目标虚拟对象的动作驱动数据，其中，所述目标肢体信息为所述真实对象执行所述目标动作过程中的肢体信息；所述动作驱动数据为驱动所述目标虚拟对象执行所述目标动作的数据；基于所述动作驱动数据生成目标动画视频，其中，所述目标动画视频中包含所述目标虚拟对象执行所述目标动作的视频画面。

技术领域

本公开涉及视频处理的技术领域，具体而言，涉及一种视频生成方法、装置、电子设备以及存储介质。

背景技术

目前，制作3D类动画的动画制作软件大部分为安装在个人计算机(personalcomputer，简称PC)端的软件。动画设计师在基于该动作制作软件制作虚拟人物的动画时，需要在动画制作软件中选定任意视频帧，并手动为该视频帧中的虚拟人物增加对应的动作。针对其他视频帧，均选择相同的方法为该视频帧中的虚拟人物增加不同的动作，以实现动画视频的制作。然而，现有通过动画设计师手动为虚拟模型标注动作来制作动画的方式操作繁琐，且动画制作效率低。当需要标注的动作较为复杂时，为动画设计师增加了动画设计难度，从而进一步降低了动画制作效率。

发明内容

本公开实施例至少提供一种视频生成方法、装置、电子设备以及存储介质。

第一方面，本公开实施例提供了一种视频生成方法，包括：获取待处理视频，其中，所述待处理视频中包含真实对象执行目标动作的视频画面；利用所述待处理视频中所述真实对象的目标肢体信息，确定目标虚拟对象的动作驱动数据，其中，所述目标肢体信息为所述真实对象执行所述目标动作过程中的肢体信息；所述动作驱动数据为驱动所述目标虚拟对象执行所述目标动作的数据；基于所述动作驱动数据生成目标动画视频，其中，所述目标动画视频中包含所述目标虚拟对象执行所述目标动作的视频画面。

上述实施方式中，通过利用真实对象的目标肢体信息确定目标虚拟对象的动作驱动数据，可以实现自动生成驱动目标虚拟对象执行目标动作的数据；从而可以实现基于该动作驱动数据自动生成目标虚拟对象执行目标动画的视频画面，进而简化了动画视频的制作过程，提高了动画视频的制作效率。针对较为复杂的动作，依然可以得到对应的动画视频，从而降低了动画视频的设计难度。

一种可选的实施方式中，所述方法还包括：获取视频生成模式，其中，所述视频生成模式用于指示所述目标虚拟对象中执行所述目标动作的模型部位；根据以下方式确定所述待处理视频中所述真实对象的目标肢体信息：基于所述视频生成模式确定所述真实对象中与所述模型部位相匹配的肢体部位；确定所述待处理视频的指定视频帧中所述真实对象的肢体部位的肢体关键点信息，所述目标肢体信息包括所述肢体关键点信息。

一种可选的实施方式中，所述利用所述待处理视频中所述真实对象的目标肢体信息，确定目标虚拟对象的动作驱动数据，包括：基于所述目标肢体信息生成所述目标虚拟对象执行所述目标动作的过程中该目标虚拟对象的各对象关键点的运动轨迹；所述动作驱动数据包括所述各对象关键点的运动轨迹。

一种可选的实施方式中，所述目标肢体信息为所述真实对象的肢体关键点信息；所述基于所述目标肢体信息生成所述目标虚拟对象执行所述目标动作的过程中该目标虚拟对象的各对象关键点的运动轨迹，包括：将所述肢体关键点信息输入至目标深度学习网络中进行处理，得到所述各对象关键点的运动轨迹。

一种可选的实施方式中，所述目标肢体信息包含多个肢体子信息，所述目标动作包含多个子动作，每个肢体子信息和每个子动作均对应待处理视频中的一个指定视频帧；所述基于所述目标肢体信息生成所述目标虚拟对象执行所述目标动作的过程中该目标虚拟对象的各对象关键点的运动轨迹，包括：基于每个所述肢体子信息生成所述目标虚拟对象执行每个所述子动作时各对象关键点的位置信息；按照所述待处理视频中各指定视频帧的采集顺序对所述位置信息进行排序，并基于排序结果确定所述运动轨迹。