[发明专利]球形视频的鱼眼图像拼接

说明书

描述用于将圆形图像覆叠到三维网状模型上以产生360度可观看内容的图像内容的相应部分的实例，其中每一个所述部分是大于所述球体的一半的半胶囊。所述部分被进行渲染，然后基于所述360度可观看内容中的所述图像内容的重叠部分进行混合。

本申请要求2016年4月5日申请的第62/318,610号美国临时申请的权利，其全部内容以引用的方式并入本文中。

技术领域

本公开涉及球形视频渲染。

背景技术

在某些类型的视频渲染中，例如360度视频，观看者可感知图像内容的多个不同视图。举例来说，当观看者正在观看显示器上的图像内容时，观看者可以选择用来观看内容的不同视图。对于360度视频，观看者可以与显示器介接以改变观看者观看图像内容的角度。

发明内容

大体来说，本公开描述用于通过将由两个相机捕获的图像内容拼接在一起来产生360度图像内容的技术，每一相机具有鱼眼镜头。这两个相机一同捕获360度的图像内容(例如，图像内容球)。在本公开中所描述的实例中，每一相机可捕获超过一半的球，且使用每一个所捕获视频内容的重叠部分来确定拼接所捕获视频内容的方式。

图像内容的这两个所捕获部分可被称作图像内容的第一部分和图像内容的第二部分，且第一部分和第二部分的图像内容可少于整个图像内容球。第一部分的图像内容可超过图像内容球的一半图像内容，且第二部分的图像内容可超过图像内容球的一半图像内容。

图形处理单元(GPU)可利用纹理映射技术来将所捕获图像内容覆叠到3D网状模型上。因为每一部分包含超过一半的图像内容球，所以第一和第二部分存在重叠图像内容。在产生图像内容球的图像内容时，GPU可通过混合重叠部分中的图像内容来说明(accountof)重叠图像内容。

在一个实例中，本公开描述一种用于产生图像内容的方法，所述方法包括：基于第一三维(3D)网状模型的第一组顶点坐标，将第一图像覆叠在第一3D网状模型上以产生图像内容的第一部分；基于第二3D网状模型的第二组顶点坐标，将第二图像覆叠在第二3D网状模型上以产生图像内容的第二部分，其中第一部分和第二部分包含重叠图像内容；分别渲染第一部分和第二部分以产生经渲染第一部分和经渲染第二部分；以及至少部分地基于依据重叠图像内容来混合第一经渲染部分和第二经渲染部分，产生图像内容球。

在另一实例中，本公开描述一种用于产生图像内容的装置，所述装置包括：存储器，其经配置以存储第一图像和第二图像；及图形处理单元(GPU)。GPU包括固定功能或可编程电路中的至少一个，所述电路经配置以进行以下操作：基于第一三维(3D)网状模型的第一组顶点坐标，将存储于存储器中的第一图像覆叠在第一3D网状模型上以产生图像内容的第一部分；基于第二3D网状模型的第二组顶点坐标，将存储于存储器中的第二图像覆叠在第二3D网状模型上以产生图像内容的第二部分，其中第一部分和第二部分包含重叠图像内容；分别渲染第一部分和第二部分以产生经渲染第一部分和经渲染第二部分；以及至少部分地基于依据重叠图像内容来混合第一经渲染部分和第二经渲染部分，产生图像内容球。

在另一实例中，本公开描述一种用于产生图像内容的装置，所述装置包括：用于基于第一三维(3D)网状模型的第一组顶点坐标而将第一图像覆叠在第一3D网状模型上以产生图像内容的第一部分的构件；用于基于第二3D网状模型的第二组顶点坐标而将第二图像覆叠在第二3D网状模型上以产生图像内容的第二部分的构件，其中第一部分和第二部分包含重叠图像内容；用于分别渲染第一部分和第二部分以产生经渲染第一部分和经渲染第二部分的构件；以及用于至少部分地基于依据重叠图像内容来混合第一经渲染部分和第二经渲染部分而产生图像内容球的构件。