高分辨率“透视”系统问世！斯坦福团队用普通器件解决光学难题

“这些属性可以支持一些原本不可能运行的应用程序，比如在行驶时读取隐藏的非视距的车牌，或者读取在拐角另一侧的行人身上戴的工作牌。”论文一作、斯坦福大学博士后研究员 Christopher Metzler 说。 vQp'bRR  
EJ>rW(s  
Trs2M+r)  
近日，由他带领的来自斯坦福大学、普林斯顿大学等四所大学组成的研究团队在 optica 发表了一项研究成果，称其利用深度学习算法，开发了一种新的基于激光的系统，只需搭配普通相机和一个功能强大的标准激光源，该系统就可以实现快速高分辨率对隐藏物体进行成像。 |x.^rx`  
)hl7)~S<  
通过深度学习算法，利用普通的市售器件就能解决复杂的光学难题，这将对自动驾驶等领域产生极大的影响。有报道称，它或许可以被安装在卫星和航天器上，用来捕捉小行星上洞穴内的图像。 V?'p E  
{]cr.y]\  
.%)uCLZr$  
论文作者在文中表述，他们验证了基于 deep-inverse correlography 的算法对噪声具有非常强的鲁棒性，在空间分辨率和总捕获时间方面都远远超过了现有 NLoS（non-line-of-sight，非视距）系统的能力。 P 4t@BwU$  
#
rF`Hk:  
Metzler 表示，此设备的设计初衷是用极高的分辨率对小物体进行成像，但它也可以与其他成像系统相结合，产生低分辨率、房间大小的重建图像。 X.S<",a{qz  
9a=>gEF],@  
研究人员在试验中，利用距离墙壁约 1 米的成像装置，对隐藏在墙角后方的高 1 厘米的字母和数字进行了图像重建。在四分之一秒的曝光时间，新技术可以获得分辨率为 300 微米的重建图像。 9r+'DX?>  
>e& L"  
i-w$-2w  
此前，麻省理工学院计算机视觉科学家拉梅什 · 拉斯卡尔（Ramesh Raskar）采用“主动成像”（active imaging）的方法，使用昂贵的专业相机 - 激光系统，实现对拐角处场景的高分辨率成像，用纳米超高速相机探测从墙壁反弹回来的光子，从而实现三维图像细节的逆向重建。 RD"-(T  
9od*N$  
但需要重视的是，除了需要使用专业相机之外，这种方式必须用激光扫描整个墙壁才能形成三维图像，整个成像过程光设备就耗资 50 万美元。直到 2018 年 3 月，新的算法以及相对经济实惠的 SPAD 相机出现，才使得这种方式削减一部分成本。 Xp9I3n
d|  
|U;O HS  
“2012 年以来，飞行时间成像技术（time-of-flight imaging）的主要进步体现在，原先需要百万美元建造的系统，现在只需要数千美元。”联合作者 Richard Baraniuk 说。 :hs~;vn)  
TE$6=;  
=R'O5J  
飞行时间成像技术原理是，来自高速激光的光线从墙上反射到隐藏区域的物体上，其中一些光线会反射回墙壁再反射回相机，通过测量返回光子的飞行时间，可以判断飞行距离进行粗略成像。 {J izCUo_'  
fz`)CWo:  
Deep-inverse correlography 则是寻找墙上的干涉图样，也就是所谓的散斑图（speckle pattern）。散斑图包含着隐藏物体的形状信息，但重建完整图案需要解决极具挑战性的算法问题。短时曝光可以实现实时成像，但是噪声很多，会严重干扰现有算法。因此，该团队才想到了利用深度学习算法。 9Q}g Vqn  
q4Wr$T$gs=  
与其他 NLoS 成像方法相比，深度学习算法可以通过准确地描述噪声，合成数据训练算法来解决重建问题，而不需要昂贵的试验训练数据。 3~bB2APk  
yyljyE  
"^6Fh"]
 
联合作者 Ashok Veeraraghavan 说：“因此，我们正在讨论的是一个比飞行时间成像技术小得多的视野，这个视野接近几英寸而不是几米，但是，在这个有限的领域内，我们能够获得比它精确 100 倍的空间分辨率。” w&p(/y  
W>i%sHH6  
接下来，研究人员计划把飞行时间成像技术和 deep-inverse correlography 相结合。“通过飞行时间技术，你可以获得一张粗略的图像，显示人在哪里，一旦你定位到了他们的胸牌或者脸，之后可以利用这项技术再得到一个超高清的局部图像。” .4R.$`z4  
J,)ytw]  
该技术属于 DARPA（美国国防高级研究计划局，Defense Advanced Research Projects Agency）“揭露计划”（REVEAL program）的一部分。该计划耗资 2700 万美元，旨在通过活跃光场的开发，革命性地提高能见度。该项目为许多美国新成立的实验室提供资金。 ZIa,pON  
=?0v,;F9|