[发明专利]视频换脸方法、电子设备和计算机可读存储介质

说明书

本发明实施例涉及互联网技术领域，公开了一种视频换脸方法、电子设备和计算机可读存储介质。上述视频换脸的方法包括：确定待换脸视频中的第一人脸；获取预设的第二人脸的人脸素材库；其中，所述人脸素材库中的各人脸素材标注有特征标签，所述特征标签至少包括用于表征人脸动作特征的动作标签；根据所述特征标签，在所述人脸素材库中确定与所述第一人脸匹配的人脸素材；将所述待换脸视频中的所述第一人脸替换为所述匹配的人脸素材，得到换脸后的视频。本发明实施例提供的方案可以提高视频换脸的精准度，使得生成的换脸视频更加逼真，效果更好。

技术领域

本发明实施例涉及互联网技术领域，特别涉及一种视频换脸方法、电子设备和计算机可读存储介质。

背景技术

随着互联网技术的突飞猛进，大众对娱乐的需求也变得越来越高，越来越多的人希望体验属于自己的明星梦，视频换脸技术应运而生。顾名思义，视频换脸就是将原视频中人物的脸换成另一张脸。最初的换脸需求是因为电影的艺术需要，使用专业的视频剪辑技术和特效技术实现现实中不可能出现的人物场景镜头。目前的视频换脸技术中，基于机器深度学习的Deepfakes技术，可以实现换脸需求。

发明人发现相关技术中至少存在如下问题：使用Deepfakes技术进行视频换脸的时候，终端通过大量收集人脸素材来生成用于换脸的人脸素材库，但Deepfakes技术只是对搜集来的人脸素材做简单的特征提取，或者对人脸素材进行简单的三角剖析，根据这些特征从人脸素材库中匹配素材，简单粗暴地对视频中的人脸进行替换。由于人脸经常处于移动中，会有表情动作的变化，这种简单地提取特征很难提取到人脸素材中的更多细节，难以描述人脸素材中的动作信息，进而导致视频换脸的精准度不高，生成的换脸视频非常违和，效果不佳。

发明内容

本发明的实施方式的目的在于提供一种视频换脸方法、电子设备和计算机可读存储介质，可以提高视频换脸的精准度，使得生成的换脸视频更加逼真，效果更好。

为解决上述技术问题，本发明的实施方式提供了一种视频换脸的方法，包括以下步骤：确定待换脸视频中的第一人脸；获取预设的第二人脸的人脸素材库；其中，所述人脸素材库中的各人脸素材标注有特征标签，所述特征标签至少包括用于表征人脸动作特征的动作标签；根据所述特征标签，在所述人脸素材库中确定与所述第一人脸匹配的人脸素材；将所述待换脸视频中的所述第一人脸替换为所述匹配的人脸素材，得到换脸后的视频。

本发明的实施方式还提供了一种电子设备，包括：至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述视频换脸的方法。

本发明的实施方式还提供了一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时实现上述视频换脸的实现方法。

本发明的实施方式相对于现有技术而言，确定待换脸视频中的第一人脸，获取预设的第二人脸的人脸素材库，其中，人脸素材库中的各人脸素材标注有特征标签，特征标签至少包括表征人脸动作特征的动作标签。使用人脸素材库方便了对标注有特征标签的各人脸素材进行统一管理。考虑到人脸经常处于移动中，会有一些表情动作的变化，现有技术中对人脸素材进行简单的特征提取很难提取到人脸素材中的更多细节，难以描述人脸素材中的人脸动作信息。而本发明实施方式中，由于人脸素材库中的各人脸素材标注有特征标签，且特征标签至少包括用于表征人脸动作特征的动作标签，因此，本发明实施方式中各人脸素材标注的特征标签可以清晰的描述人脸素材中的人脸动作信息。进一步的，根据可以清晰的描述人脸动作信息的特征标签，在人脸素材库中确定与第一人脸匹配的人脸素材时，可以提高匹配的精准性。将待换脸视频中的第一人脸替换为匹配的人脸素材，得到换脸后的视频，可以提高视频换脸的精准度，使得生成的换脸视频更加逼真，效果更好。