想象一下：你戴着最新款的AR眼镜走在街头，虚拟路牌精准地飘在十字路口上方，可你脚下的路牙子却暗成一团，差点绊你一跤。这就是当今增强现实的讽刺——为了让数字内容足够“结实”地浮在眼前，现实世界反而被“遮黑”了。近日，日本芝浦工业大学（SIT）助理教授 Xiaodan Hu 带领的研究团队，与合作方上海交通大学、奈良先端科学技术大学院大学一起，提出了一种新的显示策略，目的很简单：让虚拟对象看起来逼真，同时不影响用户看清真实环境。这项成果已经发表在《IEEE Transactions on Visualization and Computer Graphics》上。
听起来有点绕，其实矛盾的核心出在一个叫“遮挡”的技术上。光学透视式 AR 眼镜要把虚拟物体画进你的视野里，但要是想让这些虚拟物体显得不透明、有实体感，眼镜就必须把相应位置的真实光线遮掉一部分，不然虚实的交界处就会像两张半透明玻璃片叠在一起，根本分不清谁在前谁在后。可这种“遮光”操作一旦用力过猛，尤其在室外烈日下走动时，眼前的世界就整个黯淡下来，甚至出现大块阴影，别说看清路况，连走路都变得不安心。于是，过去行业里大多拼命在硬件上堆料，试图用更亮的光源、更强的对比度来弥补，但这条路成本高、功耗大，本质上还是跟物理规律较劲。
Xiaodan Hu 团队换了个思路——别再死磕硬件了，让显示系统像人眼一样去感知和适应环境。他们把这套方法称为感知驱动显示系统，核心是一款“遮罩平衡”算法。简单说，系统不再粗暴地给现实世界盖上一张黑毯子，而是根据你所在的光照强度、注视点位置，实时计算出一张精细到像素级别的遮罩图：哪些区域该完全透出现实光，哪些区域该象征性地压暗一点，哪些地方必须彻底挡光以突出虚拟物体的立体感。这样一来，虚拟的导航箭头依然棱角分明，而箭头背后的红绿灯、行人、地砖纹理一样清清楚楚。
怎么做到的？关键的硬件其实很常见：一块偏振分束器和一片线性偏振器。这两样东西在光学实验室里并不稀奇，但把它们用“活”才是诀窍。偏振分束器原本用来把入射光分成反射光和透射光两路，但在这里，它被倒过来使用——虚拟显示器的图像沿着一条光路射入，真实世界的光沿着另一条光路射入，两路光在分束器上汇合后共同射向人眼。线性偏振器则像一扇可以电动旋转的百叶窗，当它的角度与分束器输出的偏振方向匹配时，光线通过量最大；当旋转到正交角度时，光线几乎全被掐断。系统在不到一毫秒的时间内动态调整这扇“百叶窗”的角度，也就精确控制了从每条路径进入瞳孔的光通量。换句话说，它不是在挡住真实世界，而是在给虚实两路光分配恰当的时间与强度配额，让两者相安无事。
但这套光学机关单干还不够聪明，因为人看东西不是静止的。团队在原型机上加入了眼部跟踪和场景分析模块，连续捕捉用户的视线落点、瞳孔大小以及周围环境亮度。当你盯着远处大楼上的虚拟广告牌时，系统马上知道你的焦点在远处，于是把这片区域的虚拟内容亮度调高，同时略微压低旁边真实天空的刺眼光芒；当广告牌背景恰好有一块白色云团，系统又自动在云团边缘叠加一层微妙的暗角，防止虚拟广告的边缘淹没在亮光里。整个过程完全无需手动调节，就像人的瞳孔会根据光线放大缩小一样自然。
这里面有一个容易被忽视的技术细节：遮罩的生成不能只靠简单的亮度减法，而是要考虑人眼的视觉特征。人眼对暗环境中的亮度变化比对亮环境中的变化更敏感，也就是说，在一个本来就比较暗的真实场景里，哪怕只加一点点遮挡，人的感受也会是“突然暗了一大截”；可如果在阳光直射的广场上，同样的遮挡量几乎不会被察觉。研究团队在算法里嵌入了对数尺度的感知模型，让遮罩在暗环境里做得“克制”很多，在亮环境里则可以稍微“放肆”一点。这就解释了为什么很多现有 AR 眼镜一到室内灯光稍暗时，真实世界的可见度下降得尤其明显——因为它们用的是固定比例的遮挡，而这固定的比例在暗处恰好踩中了人眼的敏感区。
这么一整套设计下来，听起来像是系统在实时玩一场高难度的走钢丝表演。偏振分束器和线性偏振器的角度、眼部注视坐标、场景亮度分布、虚拟物体的深度信息，这几个变量同时拉扯，每一刹那都要解出一组最优的偏振角度矩阵。团队为此搭建了一个轻量化的优化引擎，先在离线阶段针对几百种典型照明与场景组合训练了一组基底参数，实际运行时只需根据实时传感器数据在基底之间插值，就能瞬间算出结果，避免了逐帧跑复杂光学仿真的延迟。这也是该方案能跑在现有移动级芯片组上的关键——它并不要求 AR 眼镜额外安装一块巨型 GPU，而是把计算需求压缩到可以接受的范围内。
有意思的是，这套看起来全然崭新的思路，其实灵感部分来自摄影中的“分区曝光”技术。摄影师在光比极大的场景里，会先对高光区域测光，再对阴影区域测光，然后通过后期合成一张各处细节完整的照片。AR 显示器的遮罩平衡与之异曲同工：它让虚拟的一层光与现实的一层光分区独立受控，再在眼睛这块最终画布上合成出动态范围极高的画面。当然，实现起来远比叠两张照片复杂，因为人的视线移动极快，任何合成都必须在微秒级内完成，否则就会出现恼人的拖影。
为了验证这套系统的真实表现，研究人员制作了一台光学实验原型，并设计了多种极端测试场景：从全黑的室内只靠虚拟箭头指路，到正午阳光下在虚拟文本和移动路人间来回扫视。初步测试显示，与传统的固定遮挡方案相比，新系统在环境光保留度上大幅领先，参与者普遍反馈“几乎感觉不到真实视野被动了手脚”。但团队也坦陈，目前原型机的光学组件还需要进一步小型化，这串偏振分束器和精密旋转装置目前还像一套实验台设备，远没有压缩到普通眼镜腿的尺寸。不过该方案的光路结构本身是折叠式设计，与目前主流的几何光波导方案存在集成的可能性，下一步工作重点就在于工程化。
也就是说，我们今天见到的各类 AR 眼镜还在虚实之间挣扎取舍，而 Shibaura 团队的这项研究可能给出了一个工程上可行的中间解。它既不像完全依靠计算机视觉前景分割那么耗费算力，也不像硬遮光板那样简单粗暴导致视野变暗，而是用一种“光的调度器”的姿态，让虚拟和现实在瞳孔前握手言和。至于这套方案最终能不能走出实验室塞进消费级眼镜腿里，还得看偏振器件微型化和量产成本的进展。但至少方向已经摆出来了：AR 不是要在现实世界上蒙一层布，而是要找出一种办法，让虚拟信息浮现在真实世界上时，不带走原本属于真实世界的每一束光。
热门跟贴