[发明专利]一种利用深度学习在多移动终端视频人物换脸的方法在审
| 申请号: | 201810897882.4 | 申请日: | 2018-08-08 |
| 公开(公告)号: | CN109063658A | 公开(公告)日: | 2018-12-21 |
| 发明(设计)人: | 吴培希 | 申请(专利权)人: | 吴培希 |
| 主分类号: | G06K9/00 | 分类号: | G06K9/00;G06T5/50 |
| 代理公司: | 深圳权清知识产权代理有限公司 44392 | 代理人: | 王大为 |
| 地址: | 200120 上海市浦东新区张*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 多移动终端 视频处理领域 多个终端 基准视频 人脸视频 人脸图片 生成模型 实时获得 视频处理 手动删除 图像子集 训练进度 移动终端 互联网 人脸 上传 替换 合成 学习 图片 | ||
1.一种利用深度学习在多移动终端视频人物换脸的方法,其特征在于:它包括如下步骤:
步骤一、获取多人脸视频中不同人脸的图像子集:在移动终端M1上获取含多人脸的基准视频A中不同人脸的图像子集;根据人脸不同将图像集分为{a1、a2…an};
步骤二、在移动终端M2、M3…Mn+1上传并生成想要替换的人脸图像集:根据多个移动终端上传的视频或图片对应生成想要替换的人脸图像集{b1、b2…bn};
步骤三、训练生成模型并与基准视频A合成多人换脸视频:通过机器深度学习将a1替换为b1,a2替换为b2,…an替换为bn,训练出模型;
利用生成的模型与含多人脸的基准视频A合成多人换脸视频。
2.根据权利要求1所述一种利用深度学习在多移动终端视频人物换脸的方法,其特征在于:在步骤一中,获得图像集{a1、a2…an}的过程为:
获取多人脸视频中不同人脸的图像子集包含移动终端M1,所述移动终端M1通过“多人脸换脸应用”上传基准视频A,所述多人脸换脸应用自动获取视频A每秒传输帧数,截取出视频中所有的人脸图片集,并自动删选掉不清晰和错误的图片。
3.根据权利要求1所述一种利用深度学习在多移动终端视频人物换脸的方法,其特征在于:在步骤二中,多个移动终端M2、M3,…Mn+1分别上传并对应生成想要替换的人脸图像集{b1、b2…bn}是指:所述移动终端M2选定被替换的a1人脸集并上传单人脸视频B1,自动获取所述视频B每秒传输帧数,生成人脸图片集b1;所述移动终端M3选定并上传被替换的a2人脸集并上传单人脸图片集B2,生成人脸图片集b2;所属移动终端Mn+1选定并上传被替换的an人脸集,生成人脸图片集bn。
4.根据权利要求3所述一种利用深度学习在多移动终端视频人物换脸的方法,其特征在于:生成替换人脸集包括截取视频方式和图片直接生成方式,所述截取视频方式是通过上传单人脸视频B1,获取每秒帧数,将视频处理成图片并生成人脸图片集b1,所述图片直接生成方式是通过上传单脸图片集B2,截取出人脸图片集并生成人脸图片集。
5.根据权利要求1所述一种利用深度学习在多移动终端视频人物换脸的方法,其特征在于:在步骤三中,获得训练生成模型并与基准视频A合成多人换脸视频的过程为:
步骤a.先设定训练损失值;
步骤b.判断是否在本地训练,如果在本地训练则执行步骤c,否则执行步骤d;
步骤c.利用移动终端CPU或显卡训练;
步骤d.上传图片集{a1、a2…an}、{b1、b2…bn}在服务端训练;
步骤e.判断训练是否超时,如果训练超时直接结束,否则执行步骤f;
步骤f.达到预设训练损失值;
步骤g.生成模型并通知用户;
步骤h.判断是否需要继续训练,如果是则调整预设训练损失值重复步骤e-h,如果不需要则利用生成的模型和基准视频A合成多人换脸视频。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于吴培希,未经吴培希许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810897882.4/1.html,转载请声明来源钻瓜专利网。





