[发明专利]合成立体视觉图像内容捕获有效
申请号: | 201880025565.1 | 申请日: | 2018-04-27 |
公开(公告)号: | CN110546951B | 公开(公告)日: | 2021-10-26 |
发明(设计)人: | 杰里米·切尔诺比耶夫;霍曼·梅什金;斯科特·多利姆 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | H04N13/275 | 分类号: | H04N13/275 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 周亚荣;邓聪惠 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 合成 立体 视觉 图像 内容 捕获 | ||
1.一种生成立体视觉图像的方法,包括:
接收三维场景;
重新定位三维场景的顶点以针对从单个相机位置进行渲染来调整,其中,重新定位所述三维场景的所述顶点包括,对于每个顶点:
识别虚拟瞳孔圆的、与该顶点相交的切线,
基于所识别的切线来确定偏移矢量,以及
基于所述偏移矢量来重新定位该顶点;以及
将重新定位后的三维场景投射到左眼图像立方体和右眼图像立方体上;
通过基于所述左眼图像立方体和所述右眼图像立方体的表面来确定立体视觉图像的像素的值,生成所述立体视觉图像。
2.根据权利要求1所述的方法,其中,重新定位所述三维场景的所述顶点包括:使用GPU的顶点着色器来重新定位所述顶点。
3.根据权利要求1所述的方法,其中,所述基于所述左眼图像立方体和所述右眼图像立方体的表面来确定立体视觉图像的像素的值包括:
将所述左眼图像立方体和所述右眼图像立方体上的点映射到所述立体视觉图像的像素。
4.根据权利要求1所述的方法,其中,基于所识别的切线来确定偏移矢量包括:
基于所识别的切线,在所述虚拟瞳孔圆上识别切点;以及
通过从所述虚拟瞳孔圆的中心减去所述切点来确定所述偏移矢量。
5.根据权利要求3所述的方法,其中,将所述左眼图像立方体和所述右眼图像立方体上的点映射到立体视觉图像的像素包括,对于每个像素:
基于该像素在所述立体视觉图像内的位置,从所述左眼图像立方体和所述右眼图像立方体中选择图像立方体;
基于该像素在所述立体视觉图像内的位置,针对该像素确定射线;以及
向所选择的图像立方体投射所述射线以识别交点。
6.根据权利要求1所述的方法,进一步包括:
使用视频游戏引擎生成所述三维场景;以及
在视频游戏会话期间将所述立体视觉图像流送到另一个计算设备。
7.一种计算设备,包括:
至少一个处理器;以及
存储指令的存储器,所述指令在被所述至少一个处理器执行时使得所述计算设备:
接收三维场景;
重新定位所述三维场景的顶点,以补偿定向立体视觉投射中相机位置的变化,其中,重新定位所述三维场景的所述顶点包括,对于每个顶点:
识别虚拟瞳孔圆的、与该顶点相交的切线,
基于所识别的切线来确定偏移矢量,以及
基于所述偏移矢量来重新定位该顶点;以及
基于所重新定位的顶点来生成立体视觉图像。
8.根据权利要求7所述的计算设备,其中,所述至少一个处理器包括图形处理单元,并且所述指令进一步使得所述计算设备使用所述图形处理单元的顶点着色器来重新定位所述顶点。
9.根据权利要求8所述的计算设备,其中,所述指令进一步使得所述计算设备使用所述图形处理单元的外壳着色器和域着色器来细分所述三维场景。
10.根据权利要求9所述的计算设备,其中,所述指令进一步使得所述计算设备基于所述三维场景的三角形的边长来确定用于细分所述三维场景的细分因子。
11.根据权利要求9所述的计算设备,其中,所述指令进一步使得所述计算设备基于所述三维场景的三角形的垂直位置来确定用于细分所述三维场景的细分因子。
12.根据权利要求7所述的计算设备,其中,使得所述计算设备基于所重新定位的顶点来生成立体视觉图像的指令使得所述计算设备:
将所重新定位的顶点中的至少一部分顶点投射到图像立方体上;以及
使用所投射的顶点来生成所述立体视觉图像。
13.根据权利要求7所述的计算设备,其中,所述指令进一步使得所述计算设备:
将所述三维场景的至少一部分投射到等矩形圆柱体投射上;
确定所述三维场景的顶点的左偏移矢量和右偏移矢量;以及
复制所投射的三维场景以形成左场景和右场景;
其中,使得所述计算设备重新定位所述三维场景的顶点的指令包括:使得所述计算设备使用所述左偏移矢量偏移所述左场景的顶点以及使用所述右偏移矢量偏移所述右场景的指令;以及
其中,使得所述计算设备基于所重新定位的顶点来生成立体视觉图像的指令包括:使得所述计算设备基于所述左场景和所述右场景来生成所述立体视觉图像的指令。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201880025565.1/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序