[发明专利]基于面部辨识生成个性化表情符号和嘴唇同步视频的系统和方法

说明书

系统、方法和非暂时性计算机可读介质可以获得第一用户的第一图像，该第一用户的第一图像描绘具有中性表情或位置的第一用户的面部。可以识别描绘具有中性表情或位置的第二用户的面部的第二用户的第一图像，其中基于对阈值的满足，第二用户的面部类似于第一用户的面部。可以基于描绘具有不同于中性表情或位置的表情或位置的第二用户的面部的第二用户的第二图像，来生成描绘具有不同于中性表情或位置的表情的第一用户的面部的第一用户的第二图像。

发明领域

本技术涉及社交网络领域。更具体地，本技术涉及用于基于面部辨识(facialrecognition)生成各种媒体效果的技术。

背景

现今，人们常常出于各种各样的目的而利用计算设备(或系统)。例如，用户可以使用他们的计算设备来彼此交互、创建内容、分享内容和查看内容。在某些情况下，用户可以利用他或她的计算设备来访问社交网络系统(或服务)。用户可以经由社交网络系统提供、发布、分享和访问各种内容项，例如状态更新、图像、视频、文章和链接。在一些实施例中，面部辨识可以结合内容项来被执行。

概述

本公开的各种实施例可以包括系统、方法和非暂时性计算机可读介质，其被配置为获得第一用户的第一图像，该第一用户的第一图像描绘第一用户的具有中性表情(neutral expression)或位置的面部。可以识别描绘第二用户的具有中性表情或位置的面部的第二用户的第一图像，其中基于对阈值的满足，第二用户的面部类似于第一用户的面部。可以基于描绘第二用户的具有不同于中性表情或位置的表情或位置的面部的第二用户的第二图像来生成描绘第一用户的具有不同于中性表情或位置的表情的面部的第一用户的第二图像。

在一些实施例中，识别第二用户的第一图像包括比较第一用户的第一图像中的第一用户的面部点(facial point)和第二用户的第一图像中的第二用户的面部点，其中第一用户的面部点和第二用户的面部点之间的匹配度满足阈值。

在某些实施例中，生成第一用户的第二图像包括将第一用户的第一图像中的第一用户的面部点映射到第二用户的第二图像中的第二用户的面部点。

在一个实施例中，基于第一用户的第二图像为第一用户生成个性化表情符号(emoticon)。

在一些实施例中，第二用户的第一图像被包括在第二用户演唱歌曲的视频中，并且基于第一用户的第二图像生成第一用户的嘴唇同步视频。

在某些实施例中，识别第二用户的第一图像包括比较第一用户的第一图像中的至少一个区域的纹理和第二用户的第一图像中的对应区域的纹理，其中第一用户的第一图像中的至少一个区域的纹理和第二用户的第一图像中的至少一个区域的纹理之间的匹配度满足阈值。

在一个实施例中，复制第二用户的第一图像中的至少一个区域的一部分，以生成第一用户的第二图像。

在一些实施例中，比较第一用户的第一图像中的至少一个区域的纹理和第二用户的第一图像中的对应区域的纹理包括：确定第一用户的第一图像中的至少一个区域的纹理特征和第二用户的第一图像中的至少一个区域的纹理特征。

在某些实施例中，图像被表示为值的矩阵，并且图像的纹理特征包括以下中的一个或更多个：值的平均值或值的中值。

在一个实施例中，不同于中性表情的表情包括以下中的一种或更多种：高兴表情、悲伤表情、愤怒表情、惊讶表情、哭泣表情、微笑表情、大笑表情或皱眉表情。

本公开的各种实施例可以包括系统、方法和非暂时性计算机可读介质，其被配置为获得用户的第一图像，该用户的第一图像描绘用户的具有特定表情的面部。可以确定特定表情的关键点(key point)。特定表情的关键点可以被放大。基于放大的关键点，可以生成描绘用户的具有特定表情的放大版本的面部的用户的第二图像。