[发明专利]视频剪辑对象跟踪

说明书

本公开的方面涉及一种系统，该系统包括存储至少一个程序的计算机可读存储介质，以及一种用于在视频剪辑中渲染三维虚拟对象的方法。该方法和系统包括使用具备相机的设备捕获真实场景的视频内容以及在视频内容的捕获期间由具备相机的设备收集的运动信息。被捕获的视频和运动信息被存储。处理所存储的被捕获视频内容，以识别场景中的真实对象。生成交互式增强现实显示，该交互式增强现实显示：向所存储的被捕获视频内容中添加虚拟对象以创建包括真实场景和虚拟对象的增强视频内容；在增强视频内容的播放期间，至少部分地基于所存储的运动信息来调整在增强视频内容内虚拟对象在屏幕上的位置。

相关申请的交叉引用

本申请要求于2019年1月8日提交的序列号为16/242，708的美国专利申请的优先权的权益，其要求于2018年8月30日提交的申请号为62/725，058的美国临时专利申请的优先权的权益，其全部内容通过引用合并于此。

技术领域

本公开总体上涉及视觉呈现，并且更具体地涉及在真实环境中对表面渲染虚拟修改。

背景技术

虚拟渲染系统可用于创建引人入胜和娱乐性的增强现实体验，其中三维虚拟对象图形内容看上去好像呈现在真实世界中。由于环境条件、用户动作、相机与要渲染的对象之间的意外视觉中断等原因，此类系统可能会出现显示问题。这可导致虚拟对象消失或以其它方式行为异常，从而破坏了虚拟对象在真实世界中的错觉。

附图说明

在不一定按比例绘制的附图中，相似的数字可以在不同的视图中描述相似的组件。为了容易地识别对任何特定元素或动作的讨论，参考标记中的一个或多个最高有效数字指的是该元素首次引入的附图编号。在附图的图中，通过示例而非限制的方式示出了一些实施例，其中：

图1是示出根据示例实施例的用于在网络上交换数据(例如，消息和相关内容)的示例消息系统的框图。

图2是示出根据示例实施例的关于消息收发系统的更多细节的框图。

图3是示出根据示例实施例的可以存储在消息收发服务器系统的数据库中的数据的示意图。

图4是示出根据示例实施例的由消息收发客户端应用生成以用于通信的消息的结构的示意图。

图5是示出了根据示例实施例的示例访问限制(access-limiting)过程的示意图，根据该过程，对内容(例如，临时消息、和数据的相关联多媒体有效载荷)或内容集合的访问(例如，临时消息故事)可以是有时间限制的(例如，短暂的)。

图6是示出根据示例实施例的增强现实系统的各个组件的框图。

图7A-B和图8是示出根据示例实施例的增强现实系统在执行用于在视频剪辑中渲染虚拟对象的过程中的示例操作的流程图。

图9是示出根据示例实施例的增强现实系统在执行用于跟踪在视频剪辑中渲染的对象的过程中的示例操作的流程图。

图10和图11是示出根据示例实施例的由增强现实系统在三维空间内渲染的对象的图。

图12是示出了根据示例实施例的可以与本文所述的各种硬件架构结合使用的代表性软件架构的框图。

图13是示出根据示例实施例的能够从机器可读介质(例如，机器可读存储介质)读取指令并执行本文讨论的方法中的任何一个或多个的机器的组件的框图。

具体实施方式

以下描述包括体现本公开的说明性实施例的系统、方法、技术、指令序列和计算机器程序产品。在下面的描述中，出于解释的目的，阐述了许多具体细节以便提供对各种实施例的理解。然而，对于本领域技术人员显而易见的是，也可以在没有这些具体细节的情况下实践实施例。通常，众所周知的指令实例、协议、结构和技术不必详细示出。