[发明专利]基于面部辨识生成个性化表情符号和嘴唇同步视频的系统和方法在审
申请号: | 201880084294.7 | 申请日: | 2018-01-02 |
公开(公告)号: | CN111527496A | 公开(公告)日: | 2020-08-11 |
发明(设计)人: | 费尔南多·德拉托雷;黄东;弗朗西斯科·韦森特卡拉斯科 | 申请(专利权)人: | 脸谱公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06Q50/00 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 俞立文;杨明钊 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 面部 辨识 生成 个性化 表情符号 嘴唇 同步 视频 系统 方法 | ||
1.一种计算机实现的方法,包括:
由计算系统获得第一用户的第一图像,所述第一用户的第一图像描绘所述第一用户的具有中性表情或中性位置的面部;
由所述计算系统识别第二用户的第一图像,所述第二用户的第一图像描绘所述第二用户的具有中性表情或中性位置的面部,其中,基于对阈值的满足,所述第二用户的面部类似于所述第一用户的面部;和
由所述计算系统基于描绘所述第二用户的具有不同于所述中性表情或中性位置的表情或位置的面部的所述第二用户的第二图像,生成描绘所述第一用户的具有不同于所述中性表情或中性位置的表情的面部的所述第一用户的第二图像。
2.根据权利要求1所述的计算机实现的方法,其中,识别所述第二用户的第一图像包括比较所述第一用户的第一图像中的所述第一用户的面部点和所述第二用户的第一图像中的所述第二用户的面部点,其中,所述第一用户的面部点和所述第二用户的面部点之间的匹配度满足所述阈值。
3.根据权利要求2所述的计算机实现的方法,其中,生成所述第一用户的第二图像包括将所述第一用户的第一图像中的所述第一用户的面部点映射到所述第二用户的第二图像中的所述第二用户的面部点。
4.根据权利要求3所述的计算机实现的方法,还包括基于所述第一用户的第二图像为所述第一用户生成个性化表情符号。
5.根据权利要求3所述的计算机实现的方法,其中,所述第二用户的第一图像被包括在所述第二用户演唱歌曲的视频中,并且其中,所述方法还包括基于所述第一用户的第二图像生成所述第一用户的嘴唇同步视频。
6.根据权利要求3所述的计算机实现的方法,其中,识别所述第二用户的第一图像包括比较所述第一用户的第一图像中的至少一个区域的纹理和所述第二用户的第一图像中的对应区域的纹理,其中,所述第一用户的第一图像中的所述至少一个区域的纹理和所述第二用户的第一图像中的至少一个区域的纹理之间的匹配度满足阈值。
7.根据权利要求6所述的计算机实现的方法,其中,复制所述第二用户的第一图像中的所述至少一个区域的一部分,以生成所述第一用户的第二图像。
8.根据权利要求6所述的计算机实现的方法,其中,比较所述第一用户的第一图像中的所述至少一个区域的纹理和所述第二用户的第一图像中的对应区域的纹理包括:确定所述第一用户的第一图像中的所述至少一个区域的纹理特征和所述第二用户的第一图像中的所述至少一个区域的纹理特征。
9.根据权利要求8所述的计算机实现的方法,其中,图像被表示为值的矩阵,并且所述图像的纹理特征包括以下中的一个或更多个:所述值的平均值或所述值的中值。
10.根据权利要求1所述的计算机实现的方法,其中,不同于所述中性表情的表情包括以下中的一种或更多种:高兴表情、悲伤表情、愤怒表情、惊讶表情、哭泣表情、微笑表情、大笑表情或皱眉表情。
11.一种系统,包括:
至少一个硬件处理器;和
存储器,其存储指令,当由所述至少一个处理器执行时,所述指令使得所述系统执行:
获得第一用户的第一图像,所述第一用户的第一图像描绘所述第一用户的具有中性表情或中性位置的面部;
识别第二用户的第一图像,所述第二用户的第一图像描绘所述第二用户的具有中性表情或中性位置的面部,其中,基于对阈值的满足,所述第二用户的面部类似于所述第一用户的面部;和
基于描绘所述第二用户的具有不同于所述中性表情或中性位置的表情或位置的面部的所述第二用户的第二图像,生成描绘所述第一用户的具有不同于所述中性表情或中性位置的表情的面部的所述第一用户的第二图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于脸谱公司,未经脸谱公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201880084294.7/1.html,转载请声明来源钻瓜专利网。