基于时序-偏光特性条状近眼孔径的超多视图三维显示
2022-04-27范海震黄海坤刘立林滕东东
范海震,叶 秋,黄海坤,刘立林,滕东东
(1. 西安电子科技大学 物理与光电工程学院,陕西 西安710071;2. 中山大学 电子与信息工程学院,广东 广州510275;3. 中山大学 物理学院,广东 广州510275)
1 引 言
现有三维(3D)显示系统主要是基于传统的体视技术,通过向观察者各眼分别投射待显示场景的各一个对应视图,利用观察者双眼视向于出屏场景出的交叉会聚,触发观察者的三维感知。在该过程中,为了清楚地观察各自对应视图,观察者各眼需要聚焦于出射锥状发散光束的显示面上。由此,会产生观察者双目会聚距离和单目聚焦距离之间的不同,即聚焦-辐辏冲突(VAC)。在VAC 的作用下,观察者眼睛的焦点在双目会聚的出屏场景和单目聚焦的显示面之间反复切换,无所适从,从而导致睫状肌过劳而引发观察者的视觉疲劳[1-5]。
为了解决聚焦-辐辏冲突这一问题,研究人员提出了各种显示技术,其中主要包括基于衍射光学的全息显示、基于几何光学的Maxwellian View 和取样技术。其中,通过衍射进行3D 场景呈现的全息显示被认为是理想的三维显示技术,其生成的各显示光点像真实物点一样,各自出射锥状光束。但受制于现有显示器件的空间带宽积,全息显示所能实现的视角、场景尺寸、分辨率等还远不能同时达到推广应用的要求[6]。过各显示物点,Maxwellian View 向观察者各眼分别投射一束以几何光线为理想状态的光束,各光束沿深度方向小的光强梯度降低了出射该光束的像素对观察者眼睛焦点的吸引力,从而在双目会聚的耦合驱动下,牵引各眼聚焦至双眼会聚点[7]。但同时,对应任一显示光点,各眼仅对应一束小发散角光束的显示原理也导致离焦模糊效应的丢失。取样技术分为两种,一种是以体素为取样单元的空间取样技术,另一种是以几何光线为理想取样单元的角取样技术。前者通过空间重现大量出射锥状光束的真实物点作为体素,来重建空间三维光点分布,常称之为体三维技术[8]。为了缓解体三维对空间体素数量的过高要求,多投影面技术通过仅于深度方向上离散分布的若干面上体素的重建,将聚焦-辐辏冲突限制于无明显视觉疲劳的深度范围内[9]。角取样技术路径中,过各显示物点,多于一条的小角间距的取样光束经观察者同一瞳孔的不同区域入射;它们于显示物点处的叠加光分布对观察者眼睛焦点牵引力足够时,牵引观察者各眼焦点一致于双目会聚点,从而克服聚焦-辐辏冲突。虽然获取取样光束的光学方法不同,集成成像[10-11]、压缩光场[12]、超多视图[13]都是基于角取样实现各目焦点对双目会聚深度的跟随一致。
通过在观察者的每只眼睛前分别放置两个条状液晶光阀,我们证明了可自然聚焦的超多视图3D 显示[14]。其4 个液晶光阀依次打开,显示屏同步刷新显示待显示场景关于打开液晶光阀的视图,并通过各眼睛接收到的两个视图进行显示。但仅基于时序复用向观察者进行视图投射,在观察者双眼所需最少4 幅视图情况下,120 Hz显示屏仅能提供的30 Hz 显示频率导致明显的闪烁效应;且仅两个孔径也极大限制了观察者各眼所对应观察视角。本文在前述工作[14]基础上,结合偏振复用和时序复用,通过各投射视图分辨率减半设计,基于240 Hz 显示器实现了更大视角的无闪烁超多视图(SMV)显示。
2 技术原理
2.1 基于时分复用的SMV 显示
图1 为参考文献[14]所实现SMV 显示系统的光学结构。沿水平x方向,点E 和F 为显示屏的边点。两个长向沿y向的条状液晶光阀沿x向排列为一个目镜,对应观察者双眼的两个目镜构建为一副SMV 眼镜。具体来说,液晶光阀L1 和L2 成组,对应左眼置放;液晶光阀R1 和R2 成组,对应右眼置放。设计该两个液晶光阀组以观察者双目距离为间距排列。所有这四个液晶光阀以时间间隔Δt/4 依次开启。同组液晶光阀沿x向间距Δδ≦Dp,其中Dp为观察者瞳孔直径。设置各液晶光阀沿x向的通光孔径尺寸也为Δδ。各液晶光阀沿x向的中心分别以CL1、CL2、CR1、CR2表示,如图1 所示。显示屏的大小为dx×dy,液晶光阀与电脑屏之间的距离为D。连接点E 和F 与每个液晶光阀水平边缘点的连线相交于液晶光阀右侧的某一点,形成4 个分别对应不同液晶光阀 的 视 点VPL1、VPL2、VPR1和VPR2。对 应 同 一 眼睛的相邻两个视点距离用ΔP表示,L是视点到液晶光阀的距离,也是设定的观察者眼睛距离液晶光阀的距离。根据图1 所示几何关系有
图1 基于时分复用的SMV 显示系统光学示意图Fig.1 Schematic optical diagram of the SMV display sys tem based on time-multiplexing.
在一个时间点,一个液晶光阀开启,同时其他液晶光阀关闭;在各时间周期内,所有液晶光阀被依次打开,显示屏同步刷新显示待显示场景关于打开液晶光阀所对应视点的视图。以时间周期t~t+Δt和待显示场景点P 为例,如图2 所示。图2 所示时间点t,仅液晶光阀R1 开启,显示屏同步显示点P 关于视点VPR1的视图,即图1 所示PR1点。也就是说,来自显示屏PR1点并过待显示场景P 点的光束被打开的液晶光阀R1 引导至视点VPR1。同理,在该时间周期的其他3 个时间点,过点P 的其他3 条光束被各自对应液晶光阀依次引导至其他3 个对应视点。在各时间周期内,循环重复此过程。当各液晶光阀组对应的视点分别为对应观察者瞳孔覆盖时,基于视觉滞留效应,过待显示点P 的两条不同方向入射光束重叠为观察者眼睛可以自然聚焦的显示光点。对于由点组成的3D 场景,上述过程适用于所有点。则各时间点,显示屏同步显示待显示场景关于打开液晶光阀所对应视点的视图,即可基于视觉滞留实现克服聚焦-辐辏冲突的超多视图显示。
图2 SMV 实现原理示意图Fig.2 Schematic diagram of the principle of SMV
2.2 引入偏光特性的SMV 显示系统
图1 所示显示系统仅基于时序复用向观察者两只眼睛投射视图,对显示屏刷新频率的要求较高。参考文献[14]采用120 Hz 显示屏所实现的30 Hz 场景,存在明显的闪烁效应。本文通过引入偏振复用,实现无闪烁的60 Hz 显示;且考虑观察者视角沿水平方向和垂直方向的固有差异,即观察者沿双眼连线方向的视角大于沿其垂直方向视角的特性,设计观察者各眼对应液晶光阀的排列方向沿观察者双目连线的垂向,将受小尺寸条状液晶光阀约束的视角置于人眼视角较小的垂向,以便实现更大的对角线视角。
如图3 所示,采用具有偏振特性的显示屏,该偏振特性显示屏的相邻像素列(或相邻像素行)分别出射偏振方向相互垂直的偏振光,分别用“·”和“-”表示。对应左眼的液晶光阀,如图3 中沿y向排列的光阀L1 和L2 在打开状态下仅允许“·”光通过;对应右眼的液晶光阀,如图3 中沿y向排列的光阀R1 和R2 在打开状态下仅允许“-”光通过。此处y向为观察者双眼连线方向的垂向。设置各液晶光阀沿y向的通光孔径尺寸一致于y向液晶光阀间距Δδ,沿x向对应不同眼睛的液晶光阀间距设置为观察者双眼间距Dp-p。各液晶光阀中心分别以CL1、CL2、CR1、CR2表示,则在各时间点,对应左眼和右眼的各一个液晶光阀可以同时打开。例如,在一个时间周期的时间点t1,液晶光阀L1 和R1 同时打开,它们分别对应于显示屏上出射“·”和“-”光的像素,各自加载待显示场景关于该液晶光阀中心点CL1和CR1的视图。则基于视觉滞留,可以通过各眼对应光阀组向该眼睛投射不同的视图,以实现SMV 显示。
图3 本文SMV 显示系统光学结构图Fig.3 Optical structure of the proposed SMV display system
根据式(2),观察者各眼仅对应两个液晶光阀进行SMV 显示的情况下,沿y向液晶光阀的孔径尺寸Δδ严重约束观察视角β。实际上,当观察者各眼对应液晶光阀数目M>2 时,可以通过相邻的M-1 个液晶光阀接收到一个拼合视图,如图4 所示。图4 以右眼对应M=4 个液晶光阀为例。在各时间周期的M=4 个时间点,该M=4个液晶光阀R1、R2、R3、R4 依次打开,它们于显示屏上的对应像素,同步显示待显示场景关于打开液晶光阀中心点的视图。连接显示屏y向边点和M-1=3 个相邻光阀组合的边点,形成交点VVPR1和VVPR2点。设计点VVPR1和VVPR2距离液晶光阀的距离L,为观察者眼睛距离液晶光阀的距离。则在包含t1、t2、t3、t4四个时间点的时间周期内,VVPR1处可以接收一个完整的拼合图像,其由ED1区域于时间t1点经液晶光阀R1 投射的光信息、D1D2区域于时间点t2经液晶光阀R2 投射的光信息、D2F 区域于时间点t3经液晶光阀R3 投射的光信息拼连而成;VVPR2处可以接收到另一个完整的拼合图像,其由ED1区域于时间点t2经液晶光阀R2 投射的光信息、D1D2区域于时间点t3经液晶光阀R3 投射的光信息、D2F 区域于时间点t4经液晶光阀R4 投射的光信息拼连而成。其他各时间周期,同理操作。则在观察者右眼瞳孔可以覆盖点VVPR1和VVPR2时,即可基于视觉滞留进行SMV 显示。此时,对应视角:
图4 拼合视图形成原理示意图Fig.4 Formation of a spliced image
明显地,相比于各眼仅对应两个液晶光阀情况下的β,各眼对应M个液晶光阀可以形成视角约M-2 倍的扩展。
3 实 验
市场上曾经流行过的3D 液晶电视,其相邻像素列分别出射偏振态相互正交的偏振光,符合本文对显示屏的需求,但此类3D 电视在目前市场上已经销声匿迹。本文以两个电脑显示屏和一个偏振分束器构建一个等效的偏振特性显示屏,如图5(a)所示。其中电脑显示屏1 经偏振分束器仅透射“·”光,电脑显示屏2 经偏振分束器仅反射“-”光。电脑显示屏2 关于偏振分束器的像和电脑显示屏1 重合,构建成一个等效的偏振特性显示屏,经偏振分束器向液晶光阀投射光信息。对应观察者左眼的M=4 个液晶光阀L1、L2、L3、L4 沿y向排列,被设计为在打开状态时仅允许来自电脑显示屏1 的透射“·”光通过;对应观察者右眼的M=4 个液晶光阀R1、R2、R3、R4 沿y向排列,被设计为在打开状态时仅允许来自电脑显示屏2 的反射“-”光通过。各电脑显示屏的物理帧频为240 Hz,对应M=4 液晶光阀的时序复用,可以实现M=4 个视图的60 Hz 无闪烁投射。每个电脑显示屏的显示区域为dx×dy=595 mm×335 mm(27 in),受定制偏振分束器的尺寸限制,每个显示屏仅400 mm×335 mm 作为显示视图的有效区域。偏振分束器的设计,令电脑显示屏1 的透射“·”光和电脑显示屏2 的反射“-”光在相同显示内容的情况下具有相同光强。对应左右眼的液晶光阀具有240 Hz 的开关频率,分别作为左右眼睛的对应目镜,并构建成一个眼镜装置,如图5(b)所示。两个目镜的各一个液晶光阀在一个时间点同步开关,8 个液晶光阀以4×1/240=1/60 s 的时间间隔循环选通。FPGA控制结构用于控制液晶光阀的时序开关及对应视图的同步加载。各电脑显示屏在任一时间点加载的信息,是待显示场景关于此时间点所选通液晶光阀在该显示器上的对应视图。
图5 实验光路结构及显示系统示意图Fig.5 Optical diagram and experimental setup of the display system
实验中,取L=10 mm,Δδ=2.7 mm,根据式(3),沿y向的观察视角β'=46.2°。采用常规的显示屏长宽比4∶3,沿对角线的视角约为70°。对所采用的显示屏,在y向视角下,距离显示屏D=383 mm 处的眼睛即可接收到显示屏显示全部信息。实际情形下,观察者眼睛和显示屏的距离D+L一般都在500 mm 以上。实验进一步取D+L=500 mm,根据式(1),ΔP=2.75 mm。对于瞳孔直径平均值为5 mm 的眼睛,每只眼睛可以接收到对应的两个拼合图像。
将相机放置于L处,以模拟观看者的右眼来拍摄显示的内容,相机透镜孔径等效地设为5 mm。在实验中,取于该等效正交偏振特性显示屏上投影尺寸为595 mm×335 mm 的场景进行显示,如图6(a)所示海底场景。图6(a)是在系统工作过程中,遮挡液晶光阀R4,通过液晶光阀R1、R2、R3 拍摄待显示场景的一幅满屏拼合图像。当液晶光阀R3 和R4 同时被遮挡时,拍摄的部分拼合图像如图6(b)所示。图6(c)为仅液晶光阀R1 未被遮挡时所拍摄。明显地,沿y向,通过M-1=3 个液晶光阀所获取拼合图像,相对于仅通过一个液晶光阀所拍摄场景,视角得到有效扩展。
图6 开启不同数量液晶光阀所拍摄到图像Fig.6 Captured photos by camera when different numbers of light valves play function
基于SMV 技术显示的场景,应具有明显的离焦模糊效果。实验中,调整相机焦距,使之对焦于不同景深,如图7 所示。其中,海底物体到显示屏 的距离分别被设置为:远处山脊在+1 000 mm 处,红色珊瑚在+500 mm 处(即等效偏光特性显示屏上),以及绿色海草在+350 mm 图7(a)~(c)分别显示了相机聚焦不同深度时拍摄的照片,红色方框中即为当前聚焦物体。明显地,相机聚焦位置处的场景清晰显示,离焦场景出现模糊。
图7 调焦至不同景深所拍摄图像Fig.7 Captured photos with camera focusing on different depths
5 结 论
本文基于构建的具有偏光特性的等效显示屏和定制的具有对应时序-偏光特性的液晶光阀,通过液晶光阀的时序开关和显示屏对应视图信息的同步刷新显示,利用8 个液晶光阀、于各时间周期的4 个时间点,向观察者各眼分别进行4 个不同视图的投射,实现对角线视角约为70°的无闪烁SMV 显示。虽然相邻行或列分别出射相互正交偏振态光的显示屏目前市场上没有,但其曾于消费市场上流行一时,技术工艺的实现性毋庸置疑[15]。所以,如果电脑显示屏被设计生产为具有正交偏振特性的形态,本文所提出并验证的显示技术可以广泛应用于电脑显示屏,以实现无聚焦-辐辏冲突的舒适三维显示界面。