[发明专利]用于光场压缩和解压缩的系统和方法有效
申请号: | 201780070295.1 | 申请日: | 2017-09-27 |
公开(公告)号: | CN109937573B | 公开(公告)日: | 2023-04-11 |
发明(设计)人: | 瑞安·奥弗贝克 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | H04N19/597 | 分类号: | H04N19/597;H04N19/507 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 李佳;周亚荣 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 压缩 和解 系统 方法 | ||
1.一种系统,包括:
用于存储第一光场的第一存储设备,所述第一光场包括图像的二维阵列,每个图像包括图像图块的对应二维阵列;
用于存储第二光场的第二存储设备,所述第二光场包括所述第一光场的压缩表示;以及
至少一个第一处理器,所述至少一个第一处理器被配置为基于所消除的图像图块和所述光场的其他图像的相同图块位置中的图像图块之间的所识别的冗余,从所述第二光场中的包含物中选择性地消除所述第一光场的图像的图像图块,
其中,所述至少一个第一处理器被配置为通过下述操作来选择性地消除图像图块:
将所述第一光场的图像的所述二维阵列组织成二叉树结构,其中,所述二叉树结构的每个节点表示图像的所述二维阵列的对应图像;以及
对于所述二叉树结构的每个非叶节点:
对于所述非叶节点处的所述图像的每个图像图块,响应于候选图像图块和所述非叶节点处的所述图像的所述图像图块之间的差异,从所述第二光场中选择性地消除所述非叶节点的后代节点处的图像中位于相同图块位置的所述候选图像图块。
2.如权利要求1所述的系统,其中,所述至少一个第一处理器被配置为通过下述操作来确定所述差异:
确定第一率失真,所述第一率失真是用所述非叶节点处的所述图像的所述图像图块替换所述候选图像图块所导致的;
确定第二率失真,所述第二率失真是对所述候选图像图块进行编码所导致的;
当所述第一率失真不大于所述第二率失真时,将所述候选图像图块包括在所述第二光场中;以及
当所述第一率失真大于所述第二率失真时,从所述第二光场中消除所述候选图像图块。
3.如权利要求1所述的系统,其中,所述至少一个第一处理器进一步被配置为:
确定所述非叶节点处的所述图像的所述图像图块的差异导数矢量,所述差异导数矢量包括一个或多个差异导数,所述一个或多个差异导数指定如何根据所述二维阵列中的所述非叶节点处的所述图像与后代节点处的所述图像之间的位置关系,通过在一个或多个维度中的所述非叶节点处对应移位所述图像来在所述非叶节点的所述后代节点处重构图像的所消除的图像图块;以及
将所述图像图块的所述差异导数矢量存储到所述第二光场。
4.如权利要求1至3中任一项所述的系统,进一步包括:
至少一个第二处理器,被配置为:
识别用于在渲染表示由所述第二光场表示的场景的视图的影像中使用的所述二维阵列的一个或多个图像的一个或多个图像图块的集合;以及
响应于确定所述一个或多个图像图块的集合包括从所述第二光场中的第一图像中所消除的第一图像图块,使用所述第二光场中的第二图像并且使用被存储用于所述第二图像的第二图像图块的差异导数矢量来重构所述第一图像图块,所述第二图像位于具有所述第一图像的节点的祖先节点处,所述第二图像图块与所述第一图像图块具有相同图块位置。
5.如权利要求4所述的系统,其中,所述至少一个第二处理器被配置为通过下述操作来重构所述第一图像图块:
基于所述差异导数矢量,相对于表示所述第一图像图块的图块位置的边界的重构窗口,来在一个或多个维度中移位部分的所述第二图像,所述部分的所述第二图像包括所述第二图像图块和至少一个其他图像图块;以及
将在移位所述部分的所述第二图像之后被包含在所述重构窗口内的像素设置为所述第一图像图块的重构表示。
6.如权利要求4所述的系统,其中,所述至少一个第二处理器进一步被配置为使用所述一个或多个图像图块的集合来渲染所述影像。
7.如权利要求4所述的系统,进一步包括:
用于显示所述影像的至少一个显示面板。
8.如权利要求7所述的系统,进一步包括:
包括所述至少一个显示面板的头戴式显示设备。
9.如权利要求1至3中任一项所述的系统,其中,所述至少一个第一处理器进一步被配置为使用基于运动搜索的编码过程,来对所述第二光场的剩余图像图块进行编码。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201780070295.1/1.html,转载请声明来源钻瓜专利网。