[发明专利]视频生成方法、装置、设备及存储介质在审
| 申请号: | 202110597283.2 | 申请日: | 2021-05-31 |
| 公开(公告)号: | CN113313790A | 公开(公告)日: | 2021-08-27 |
| 发明(设计)人: | 华淼;李冰川 | 申请(专利权)人: | 北京字跳网络技术有限公司 |
| 主分类号: | G06T11/60 | 分类号: | G06T11/60;G06K9/00 |
| 代理公司: | 北京开阳星知识产权代理有限公司 11710 | 代理人: | 祝乐芳 |
| 地址: | 100190 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 生成 方法 装置 设备 存储 介质 | ||
本公开涉及一种视频生成方法、装置、设备及存储介质,通过在获取到待处理图像后,根据待处理图像生成多个睁闭眼程度不同的目标图像,基于多个目标图像生成具有睁闭眼渐变过程的视频。本公开实施例提供的视频生成方案能够视频的趣味性,增强用户体验。
技术领域
本公开实施例涉及图像处理技术领域,尤其涉及一种视频生成方法、装置、设备及存储介质。
背景技术
相关技术中,用户可以通过拍摄视频、照片等方式记录生活,并将拍摄到的视频或照片上传到视频应用中供其它视频消费者进行观看。但是随着视频应用的发展,单纯的视频拍摄或图片拍摄,已经无法满足日益增长的用户需求,因此,如何对视频和图像进行处理,提高视频和图片的趣味性是当前亟需解决的技术问题。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开实施例提供了一种视频生成方法、装置、设备及存储介质。
一方面,本公开提供一种视频生成方法,包括:
获取待处理的图像;
基于预设的图像处理模型对所述待处理的图像中的对象的睁闭眼程度进行调整,得到多个睁闭眼程度不同的目标图像;
基于多个所述目标图像生成具有睁闭眼渐变过程的视频。
可选地,所述图像处理模型是基于多个睁闭眼程度不同的训练图像,以及各训练图像对应的睁闭眼程度数据训练得到的。
可选地,所述图像处理模型是基于多个睁闭眼程度不同的训练图像,以及各训练图像上的眼睛关键点训练得到的。
可选地,所述多个训练图像是基于多个融合模型生成,所述多个融合模型是由多个图像生成模型按照不同的权重比例融合得到的,不同的图像生成模型生成的图像中的睁闭眼程度不同。
可选地,所述多个图像生成模型中包括用于生成睁眼图像的第一模型和用于生成闭眼图像的第二模型。
可选地,所述基于预设的图像处理模型对所述待处理的图像中的对象的睁闭眼程度进行调整,得到多个睁闭眼程度不同的目标图像之前,所述方法还包括:
从所述待处理的图像中提取出所述对象的眼睛关键点,并基于所述眼睛关键点将所述对象在所述待处理的图像中的眼睛处理成预设形状和/或尺寸的眼睛。
可选地,所述基于所述眼睛关键点将所述对象在所述待处理的图像中的眼睛处理成预设形状和/或尺寸的眼睛,包括:
基于所述眼睛关键点,确定所述眼睛在所述待处理的图像中的位置;
将预设的眼睛图像覆盖到所述位置上,以使所述对象在所述待处理的图像中的眼睛被替换为所述眼睛图像中的眼睛,其中所述眼睛图像中的眼睛具有预设形状和/尺寸。
可选地,所述基于所述眼睛关键点将所述对象在所述待处理的图像中的眼睛处理成预设形状和/或尺寸的眼睛,包括:
基于预设的眼睛形状参数和/或尺寸参数对所述眼睛关键点在所述待处理的图像中的位置进行调整,以使所述待处理的图像中的眼睛具有预设形状和/或尺寸。
可选地,所述基于预设的图像处理模型对所述待处理的图像中的对象的睁闭眼程度进行调整,得到多个睁闭眼程度不同的目标图像,包括:
在所述待处理的图像包括多个图像时,针对所述待处理的图像中的每个图像,将所述图像和针对所述图像随机生成的目标睁闭眼程度数据输入所述图像处理模型,使得所述图像处理模型基于所述目标睁闭眼程度数据对所述对象在所述图像中的睁闭眼程度进行调整,得到睁闭眼程度与所述目标睁闭眼程度数据相匹配的目标图像。
可选地,所述基于预设的图像处理模型对所述待处理的图像中的对象的睁闭眼程度进行调整,得到多个睁闭眼程度不同的目标图像,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110597283.2/2.html,转载请声明来源钻瓜专利网。





