[发明专利]眼部纹理修复

说明书

提出了用于生成针对视频流内的对象的纹理模型的系统、设备、媒体和方法。当在计算设备处捕获图像集时，所述系统和方法访问图像集。所述系统和方法在所述图像集的一部分内确定包含眼睛的感兴趣区域，并从所述感兴趣区域提取虹膜区域。所述系统和方法在感兴趣区域内分割巩膜区域，并基于虹膜区域和巩膜区域生成针对眼睛的纹理。

优先权要求

本申请要求于2018年7月31日提交的序列号为16/051,083的美国专利申请的优先权，在此要求其优先权的权益，并且其内容通过引用整体合并于此。

技术领域

本公开的实施例总体上涉及图像流内的对象识别和操纵。更具体地，但非限制性地，本公开提出用于识别、建模和跟踪图像或视频流内呈现的对象的系统和方法。

背景技术

电信应用和设备可以使用各种媒体(诸如文本、图像、声音记录和/或视频记录)来提供多个用户之间的通信。例如，视频会议允许两个或更多个人使用软件应用、电信设备和电信网络的组合彼此通信。电信设备还可以记录视频流以在横跨电信网络中作为消息进行发送。通常，基于视频的电信应用程序使用户可以在网络上面对面聊天。使用当前的系统，视频聊天中的用户可能将他们的注意力集中在屏幕上，从而给人一种印象，即用户没有互相关注。涉及视频录制的某些应用程序可以对视频中描述的各个方面进行建模。通常，此类系统无法实现视频的实时建模或实时操纵。此外，电信和其他计算机应用程序利用用户界面，在该用户界面中，用户使用诸如鼠标的物理手势或设备与应用程序进行交互。这些电信应用程序通常限制用户可控制应用程序的方式；而且，他们无法确定用户界面的哪个部分正在引起用户的关注。

附图说明

附图中的各个附图仅示出了本公开的示例实施例，并且不应被视为限制其范围。

图1是示出根据一些示例实施例的联网系统的框图。

图2是示出根据一些示例实施例的对象建模系统的图。

图3是示出根据一些示例实施例的用于针对视频流内的对象生成纹理模型的示例方法的流程图。

图4是示出根据一些示例实施例的用于针对视频流内的对象生成纹理模型的示例方法的流程图。

图5是示出根据一些示例实施例的用于跟踪视频流内的对象的纹理模型的示例方法的流程图。

图6是示出根据一些示例实施例的用于跟踪视频流内的对象的纹理模型的示例方法的流程图。

图7是描绘根据一些示例实施例的示例移动装置和移动操作系统界面的用户界面图。

图8是示出根据一些示例实施例的可以安装在机器上的软件体系结构的示例的框图。

图9是呈现根据示例实施例的计算机系统形式的机器的图形表示的框图，在该计算机系统内可执行一组指令以使机器执行在此所讨论的任何方法。

在此提供的标题仅仅是为了方便，并不必须影响所用术语的范围或含义。

具体实施方式

以下描述包括说明本公开的实施例的系统、方法、技术、指令序列和计算机器程序产品。在以下描述中，出于解释的目的，阐述了许多具体细节以便提供对本发明主题的各种实施例的理解。然而，对于本领域技术人员显而易见的是，也可以在没有这些具体细节的情况下实践本发明主题的实施例。通常，公知的指令实例、协议、结构和技术不必详细示出。

在本公开的一方面，用户打开应用程序。该应用程序访问相机以捕获相机视野中的图像。例如，相机可捕获用户面部的视频流或图像组。然后，系统和方法识别感兴趣的对象，例如用户的眼睛。该系统生成眼睛的模型并跟踪用户的视线，确定用户在用户界面上的注视位置。然后，系统可以改变用户的注视位置，感兴趣对象的各个方面(例如，眼睛的颜色)，感兴趣对象的各个方面或特征，或者可以用于生成模型，化身或用户的动画。