[发明专利]妆容迁移方法及装置、人脸对齐方法及装置在审
申请号: | 202110881316.6 | 申请日: | 2021-08-02 |
公开(公告)号: | CN113793248A | 公开(公告)日: | 2021-12-14 |
发明(设计)人: | 陈浩然;万昭祎;赵荔;姚聪 | 申请(专利权)人: | 北京旷视科技有限公司;北京迈格威科技有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06T7/33;G06T7/38;G06K9/00 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 唐正瑜 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 迁移 方法 装置 对齐 | ||
本申请提供一种妆容迁移方法及装置、人脸对齐方法及装置,妆容迁移方法包括:获取待上妆人脸图像全局的关键点位置和已上妆人脸图像全局的关键点位置;根据待上妆人脸图像全局的关键点位置和已上妆人脸图像全局的关键点位置,对已上妆人脸图像进行全局对齐,得到中间图像;根据待上妆人脸图像中目标部位的关键点位置和中间图像中目标部位的关键点位置,对中间图像的目标部位进行局部对齐,得到已上妆人脸图像对应的人脸对齐图像;根据待上妆人脸图像和已上妆人脸图像对应的人脸对齐图像进行妆容迁移,获得待上妆人脸图像对应的上妆图像。上述方案通过精准对齐,实现妆容准确迁移。
技术领域
本申请涉及图像处理技术领域,特别涉及一种人脸对齐方法及装置、妆容迁移方法及装置、电子设备、计算机可读存储介质。
背景技术
随着AI技术的发展,人脸技术应用的场景越来越多元化,除了常见的人脸识别等问题,综合深度学习与各项人脸技术,对于两张图片,其中一张图是没有上妆的原图,另一张图片是已经添加了妆容的上妆参考图,通过神经网络,将参考图的妆容迁移到未上妆的原图人脸上。
这种妆容迁移技术上具备一定技术可行性,且具有很高的实用价值。然而,由于原图与参考图人脸的角度、脸型等等差异,基于深度学习的全局妆容迁移方法对上妆关键区域的捕捉存在一定的欠缺,因此需要对人脸数据进行更好地形变,以辅助训练时对上妆部位进行更准确的匹配。
在实际应用中,我们想要对两张人脸进行妆容的迁移,一定是希望两张图中的人脸光照、角度等条件尽可能的相同,这样在迁移的过程中,存在的问题较少,效果会更好。但是在实际应用中,很难保证两张照片中的人脸角度、形态对齐。目前,现有的基于传统算子的对齐方法普遍较为粗糙,很难在像素级问题上精准对齐。
发明内容
本申请实施例提供了一种妆容迁移方法,用以通过精准对齐,实现妆容准确迁移。
本申请实施例提供了一种妆容迁移方法,包括:
获取待上妆人脸图像全局的关键点位置和已上妆人脸图像全局的关键点位置;
根据所述待上妆人脸图像全局的关键点位置和已上妆人脸图像全局的关键点位置,对所述已上妆人脸图像进行全局对齐,得到中间图像;
根据所述待上妆人脸图像中目标部位的关键点位置和所述中间图像中目标部位的关键点位置,对所述中间图像的目标部位进行局部对齐,得到所述已上妆人脸图像对应的人脸对齐图像;
根据所述待上妆人脸图像和所述已上妆人脸图像对应的人脸对齐图像进行妆容迁移,获得所述待上妆人脸图像对应的上妆图像。
在一实施例中,所述获取待上妆人脸图像全局的关键点位置和已上妆人脸图像全局的关键点位置,包括:
获取待上妆人脸图像和已上妆人脸图像;
分别对所述待上妆人脸图像和已上妆人脸图像进行全局关键点检测,获得所述待上妆人脸图像全局的关键点位置和所述已上妆人脸图像全局的关键点位置。
在一实施例中,获取待上妆人脸图像和已上妆人脸图像;
获取原图和参考图;
分别对所述原图和参考图进行人脸检测,得到所述原图对应的待上妆人脸图像和所述参考图对应的已上妆人脸图像。
在一实施例中,所述根据所述待上妆人脸图像全局的关键点位置和已上妆人脸图像全局的关键点位置,对所述已上妆人脸图像进行全局对齐,得到中间图像,包括:
根据所述待上妆人脸图像全局的关键点位置与所述已上妆人脸图像全局的关键点位置之间的对应关系,构建第一变换公式;
根据所述第一变换公式,对所述已上妆人脸图像进行仿射变换、透视变换或薄板样条函数变换,得到所述中间图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京旷视科技有限公司;北京迈格威科技有限公司,未经北京旷视科技有限公司;北京迈格威科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110881316.6/2.html,转载请声明来源钻瓜专利网。