Light Pipe Holographic Display: Bandwidth-preserved Kaleidoscopic Guiding for AR Glasses

一句话总结

本文提出用”光管（light pipe）”把 AR 全息显示的光引擎从图像合成器旁挪走，并建立一套对光管内全内反射造成的”万花筒效应”进行建模与补偿的全息渲染方法，从而在纤薄眼镜形态下无损地把波前的全角带宽送到眼前。

研究背景

• 领域现状：AR 近眼显示（NED）通常由”光引擎”（光源、显示器件、中继光学）和位于眼前的”图像合成器”两部分组成。为保证光能完整传递，二者往往紧贴在一起。全息显示借助空间光调制器（SLM）能在像素级调制相干光的波前，天然提供单目深度线索、规避辐辏调节冲突，被视为轻量化 AR 的有力路线。
• 核心痛点：光引擎紧贴合成器意味着大量光学与电子器件堆在眼前，导致设备笨重、前端配重大、遮挡视野。若强行把光引擎移远，波前在自由空间传播时会发散并损失带宽；用 4f 系统级联中继又受镜片 f 数限制、会累积像差与畸变。
• 本文 idea：引入一段玻璃光管作为波前导引通道。凭借全内反射，光管无论多长都能保住完整角带宽，从而把光引擎（可做成眼镜腿末端形态）与图像合成器解耦，眼前只留下透明合成器。

方法

整体框架：把光引擎发出的波前送入一段方形玻璃光管，波前在管内经全内反射多次折返、以”万花筒”方式复制并翻转；本文对这一导引过程建立可微的传播模型，并据此优化 SLM 的相位图，使得经过光管后在输出端能重建出正确、满带宽的全息图像。

flowchart LR
  A[SLM 相位图] --> B[入射波前]
  B --> C[光管内 TIR 万花筒导引建模]
  C --> D[各虚拟波前 移位 ASM 卷积并求和]
  D --> E[输出端波前]
  E --> F[重建像与目标比较]
  F -->|MSE 损失反传| A

关键设计：

• 光管万花筒传播模型：全内反射会让波前看起来像是从一系列被水平或竖直翻转的”虚拟光源”发出。直接套用自由空间传播模型渲染会让这些反射项彼此叠加、形成万花筒式的错乱图像。本文按全内反射次数枚举虚拟波前（次数约为 \(M=\lceil l\tan\theta_{max}/d\rceil\)，其中 \(d\) 为光管边长、\(l\) 为长度），用角谱法（ASM）传播每个虚拟波前。
• 移位 ASM 核 + 只算到达输出口的分量：若把所有虚拟波前拼接成一张大波前再传播，计算量随扩展域急剧上升。本文改为只计算每个虚拟波前中”能到达输出孔径”的部分，为每个虚拟波前构造带空间移位相位的 ASM 核 \(H_{ij}(u,v;l)=H(u,v;l)\exp[j2\pi(-x_{ij}u-y_{ij}v)]\)，并乘上满足奈奎斯特采样条件的带限掩膜 \(\chi_{ij}\) 以防混叠，最后把各分量求和得到输出端波前 \(g_{LP}(x,y;l)=\sum_{i,j=-M}^{M}\mathcal{F}^{-1}\{\mathcal{F}\{g_{ij}\}H_{ij}\}\chi_{ij}\)。
• 相位优化与去 DC 噪声：SLM 为纯相位反射式器件，通过最小化重建强度与目标的 MSE 损失 \(\mathcal{L}=\mathrm{MSE}(s\cdot I, I_{target})\) 优化相位图，并用时间复用（多帧平均）压制散斑。针对傅里叶全息图中心的 DC 噪声，借鉴给 SLM 引入会聚波前的做法，把 DC 噪声焦面与像面分离；会聚相位一并纳入优化。
• 相机在环（CITL）与失配补偿：把真实拍摄结果引入优化闭环，配合图像校正与单应变换，让拍到的全息像直接对齐目标。对光管的六类机械失配（三轴平移、三轴旋转），通过对入射波前做平移裁剪或旋转变换纳入模型，从而在优化阶段预先补偿。

实验结果

主实验对比了在受限体积（1 mm × 1 mm 采样窗）下、不同传播模型渲染的菲涅尔全息图质量，SLM 采样间距取 1 μm、波长 450 nm。自由空间传播随传播距离增大高频分量明显流失，而光管导引在各距离下都逼近”无体积约束的理想菲涅尔传播”：

传播距离	自由空间（受限体积）	光管导引（受限体积）	理想菲涅尔（无约束）
20 mm	PSNR 25.3 dB / SSIM 0.319	PSNR 41.2 dB / SSIM 0.944	PSNR 43.2 dB / SSIM 0.953
40 mm	PSNR 26.5 dB / SSIM 0.396	PSNR 41.2 dB / SSIM 0.943	PSNR 43.2 dB / SSIM 0.952
80 mm	PSNR 28.8 dB / SSIM 0.595	PSNR 41.3 dB / SSIM 0.945	PSNR 43.2 dB / SSIM 0.952

其余实验以文字补充：在实测原型上（自制 N-BK7 光管，截面 3 mm、长 80 mm，SLM 采样间距 3.74 μm、采样数 1000，RGB 波长 638/520/450 nm），未建模万花筒效应时图像出现翻转叠加、无法辨认；采用本文万花筒导引模型后，在全视场内重建出清晰的二维像与带真实深度线索的三维场景，全带宽视场约 9.2°（受限体积下有效约 6.4°）。搭配倾斜半镜与反射偏振片的光导合成器构成 AR 原型，成功叠加虚拟与真实场景。失配分析显示：平移失配（尤其 \(x\)、\(y\) 轴 1 mm）比沿光轴 \(z\)（即使 5 mm）影响更大，旋转失配会在整幅傅里叶像内产生复制像；将失配纳入优化后各类失配均能重建出正确图像。计算量方面，红光、1 μm 采样间距、约 69.5 mm 长度下渲染约需 43.2 GB 显存（RTX A6000 可承受），显存随光管长度呈二次增长。

亮点与局限

• 亮点：
  • 用一段普通玻璃光管解决”光引擎必须紧贴合成器”的结构约束，让眼前只剩透明合成器，形态更接近真眼镜、配重更分散。
  • 全内反射保住完整角带宽，与光管长度无关；对未来小采样间距（亚微米级）大衍射角 SLM 更有利（折射率 \(n>\sqrt{2}\) 的介质即可全带宽导引，N-BK7 在可见光全谱满足）。
  • 对六自由度机械失配给出可仿真、可补偿的完整方法，仿真与实测高度吻合，增强实用鲁棒性。
• 局限：
  • 系统对对准仍然敏感，日常使用中的实时失配测量与反馈补偿尚未解决，会增加系统复杂度。
  • 移位 ASM 核数量随全内反射次数二次增长，显存与算力开销大，且当前非实时渲染。
  • 光管带来额外重量；当前 3 mm 厚度偏大，做到 1 mm 以下制造难度骤增；若薄到数十微米量级，几何光学解释可能失效，需按导波模式（类似光纤）处理。

延伸思考

• 该方法与近期把波前传播建模进薄波导合成器的工作互补：光管负责”把光引擎挪远且不丢带宽”，波导/光导负责”眼前纤薄合成”，两者结合有望进一步压缩整机形态。
• 显存随全内反射次数二次膨胀是落地瓶颈，值得追问：带限掩膜让每个移位 ASM 核天然稀疏，能否借稀疏计算或神经网络代理传播模型换取实时性，并在精度与效率间做可控折中？
• 光管保持线偏振与相干性的特性是补偿旋转失配得以成立的前提，这也提示该方案对光源相干度、材料均匀性与端面加工精度较为依赖，实际产品化需要配套的制造与标定链路。