[发明专利]一种基于深度学习的视频人物面部替换方法在审
申请号: | 201910050734.3 | 申请日: | 2019-01-20 |
公开(公告)号: | CN109754364A | 公开(公告)日: | 2019-05-14 |
发明(设计)人: | 徐建军;汪尚华;罗志忠;王关青;楼百宏 | 申请(专利权)人: | 杭州富阳优信科技有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06T11/60;G06K9/00;G06N3/04 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 311400 浙江省杭州市富阳*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 替换 面部表情 目标人物 情绪特征 人物面部 视频 影像资料 表情 输出层 学习 面部特征 面部影像 图像处理 训练模型 训练影像 整体轮廓 可见层 隐藏层 帧画面 截取 检索 互联网 角色 分析 | ||
1.一种基于深度学习的视频人物面部替换方法,其特征在于:包括以下步骤,
步骤S1,采集多组被替换人物以及目标人物的面部影像资料;
步骤S2,训练面部特征部位的深度学习模型,包括,
步骤S2.1,将面部影像中的输入像素作为模型的可见层,
步骤S2.2,将色块的边界作为第一隐藏层,
步骤S2.3,将边界组成的轮廓作为第二隐藏层,
步骤S2.4,将面部特征部位作为输出层;
步骤S3,将输出层的面部特征组合至面部整体轮廓中,作为面部表情,建立并训练表情深度学习模型,包括,
步骤S3.1,将面部表情作为可见层,
步骤S3.2,将面部表情对应轮廓的变化作为第一隐藏层,
步骤S3.2,将情绪特征作为输出层;
步骤S4,将待替换视频每帧画面输入至表情深度学习模型中,分析出对应的情绪特征;
步骤S5,根据步骤S4中得出的情绪特征,将对应情绪特征的被替换人物面部表情替换为目标人物的面部表情;
步骤S6,将步骤S5中替换后画面帧重新组合为视频。
2.根据权利要求1所述的一种基于深度学习的视频人物面部替换方法,其特征在于:所述步骤S1中,
步骤S1.1,人工选取一定数量的被替换人物以及目标人物的面部影像资料,
步骤S1.2,将步骤S1.1中影像输入训练模型,得出被替换人物以及目标人物的特征值,
步骤S1.3,以特征值自主在互联网中检索提取更多影像资料,
步骤S1.4,截取影像资料中的面部部分。
3.根据权利要求1所述的一种基于深度学习的视频人物面部替换方法,其特征在于:所述步骤S2中,选取以下学习参数:动量项因子为0.65、学习率为0.25、初始的权值和阈值为[-0.618,0.618]之间的随机数,隐层和输出层的激活函数分别为tangent sigmoid和log-sigmoid、学习算法为BP算法。
4.根据权利要求1所述的一种基于深度学习的视频人物面部替换方法,其特征在于:所述步骤S5中,采用贴图方式,将对应情绪特征的被替换人物面部表情替换为目标人物的面部表情。
5.根据权利要求4所述的一种基于深度学习的视频人物面部替换方法,其特征在于:将贴图之后的人物面部图像进行分析,若面部图像贴合之后,面部轮廓不贴合,则采用以下方式进行替换,
将目标人物的面部表情分解为面部中边界组成的轮廓,并且将轮廓按照比例替换贴合至被替换人物的面部。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州富阳优信科技有限公司,未经杭州富阳优信科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910050734.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:基于鱼眼相机的环视图像合成方法和装置
- 下一篇:一种图像处理方法及装置