[发明专利]一种基于头部追踪的超大视角集成成像3D显示方法

说明书

技术领域

本发明涉及集成成像3D（三维）显示技术，更具体地说，本发明涉及一种基于头部追踪的超大视角集成成像3D显示方法。

背景技术

集成成像是一种重要的3D显示，观看者无需佩戴助视眼镜即可观看到立体图像。该3D显示可以完全还原真实3D场景，具有全视差、全彩色和视点连续的优点。但是该3D显示的3D观看视角却很小，大大地限制了其发展。 

集成成像3D显示存在一个由微图像阵列确定的3D显示主视区和多个次视区，以及相邻视区之间的串扰区。通过将微图像阵列微小移动，可以使集成成像显示主视区产生相应的移动，并且使移动后的主视区和先前的主视区存在部分重合，也即部分重合主视区。

基于头部追踪的集成成像3D显示可以增大3D观看视角，该3D显示在传统集成成像3D 显示的基础上加入了头部追踪技术，实时地判断观看者所处的空间位置，然后根据此位置更新和移动用于集成成像显示的微图像阵列，从而使3D观看视角增大。

一般的追踪系统是利用普通摄像头拍摄观看者所处空间，采用图像处理技术，获取观看者的空间位置，然后显示系统根据这个位置对应的视点显示相应的微图像阵列。由于追踪拍摄系统拍摄帧率的限制，加之头部追踪系统具有较大的时间延迟，因此通过这种方式很难得到无跳变无延时的超大视角集成成像3D显示。另外，通过图像处理仅能得到观看者的大体空间方位，其精度远不能满足实际的集成成像3D显示需求，因此上述因素也大大限制了基于头部追踪的集成成像3D显示的发展。

发明内容

本发明提出一种基于头部追踪的超大视角集成成像3D显示方法，该方法包括对集成成像部分重合视区相应图像元的渲染和自适应微图像阵列的合成两个步骤。

所述集成成像部分重合视区相应图像元的渲染，根据追踪系统能够捕获的观看者所处的空间范围，在计算机内确定虚拟相机阵列的具体参数，对已建立的3D场景进行拍摄，从而获取图像元。如图1所示，通过移动微图像阵列，使集成成像3D显示产生部分重合视区，实现对集成成像观看空间的划分，然后对移动后的不同主视区进行编号，为了简化说明，图中仅标出观看空间水平方向的划分和编号，其竖直方向处理方式相同。追踪系统实时捕获观看者的空间方位，并且判断观看者所处的观看空间及相应编号，由追踪系统能够捕获的观看者的空间范围确定虚拟相机阵列的拍摄范围。如附图2所示，虚拟相机阵列由投影变换的视框体表示，其中包含的视框体个数为M×N，并且视框体均采用透视投影几何模型，视框体阵列中各视框体间的间距相等且为p，在超大视角集成成像显示系统中，透镜元的节距也为q，而视框体渲染得到的图像元的节距为q，且q大于p，二者具体数值关系由系统观看视角扩大倍数决定，同时受限于追踪系统的追踪范围。假设显示系统单个透镜元对应的像素分辨率为a×b，则视框体渲染获取的图像元分辨率为aq/p×bq/p，渲染得到的图像元像素尺寸为相应显示透镜元像素尺寸的q/p倍，q/p > 1，也就是图像元记录了关于3D场景更多角度的信息。

所述自适应微图像阵列的合成过程，将上述渲染得到的图像元合成观看者观看视区相应的自适应微图像阵列。追踪系统实时捕获观看者的空间方位，并判断观看者所处的观看视区及其编号，根据其对应的视区编号合成最终用于显示的自适应微图像阵列，该过程可以分为两个步骤：

第一，图像元合成常规微图像阵列的过程。将视框体阵列拍摄得到的图像元按照视框体在相机阵列中的二维编号合成常规微图像阵列，在这个过程中将每个图像元绕其中心旋转180^o从而解决重建3D场景的深度翻转问题。

第二，所述自适应微图像阵列的提取过程，从常规微图像阵列中提取自适应微图像阵列，其提取规则与观看者所处的观看视区有关。在附图2中，仅是对观看视区水平方向进行了编号。为了获得水平和竖直两个方向的集成成像超大视角3D显示，本发明对观看视区水平和竖直两个方向进行编号，当观看者处于观看视区(i, j)时，其中i是视区的水平编号，j是视区的竖直编号，微图像阵列的第x行第y列像素为I(x, y)，自适应微图像阵列第m行第n列的像素为I’(m, n)，则