高分辨率“透视”系统问世!斯坦福团队用普通器件解决光学难题

发布:cyqdesign 2020-02-10 18:58 阅读:7727
“这些属性可以支持一些原本不可能运行的应用程序,比如在行驶时读取隐藏的非视距的车牌,或者读取在拐角另一侧的行人身上戴的工作牌。”论文一作、斯坦福大学博士后研究员 Christopher Metzler 说。 [/q Bvuun  
q++\< \2  
m W>Iib|  
图 | 该系统可能有一天会让自动驾驶汽车有更犀利的视觉,不仅能看到车辆,还能读取车牌(来源:Felix Heide, Princeton University)
TW>GYGz  
近日,由他带领的来自斯坦福大学、普林斯顿大学等四所大学组成的研究团队在 optica 发表了一项研究成果,称其利用深度学习算法,开发了一种新的基于激光的系统,只需搭配普通相机和一个功能强大的标准激光源,该系统就可以实现快速高分辨率对隐藏物体进行成像 Lu6g`O:['  
Cp/f18zO  
通过深度学习算法,利用普通的市售器件就能解决复杂的光学难题,这将对自动驾驶等领域产生极大的影响。有报道称,它或许可以被安装在卫星和航天器上,用来捕捉小行星上洞穴内的图像。 \~A qA!)6  
rxX4Cw]\"y  
?ckV 2  
图 | 实验设置。光从激光器,到虚拟光源,到隐藏的物体,到虚拟探测器,最后到相机(来源:论文)
OFtf)cGE  
论文作者在文中表述,他们验证了基于 deep-inverse correlography 的算法对噪声具有非常强的鲁棒性,在空间分辨率和总捕获时间方面都远远超过了现有 NLoS(non-line-of-sight,非视距)系统的能力。 z]rr Q=dAA  
=K0%bI  
Metzler 表示,此设备的设计初衷是用极高的分辨率对小物体进行成像,但它也可以与其他成像系统相结合,产生低分辨率、房间大小的重建图像。 :0B 7lDw  
4@{?4k-cq  
研究人员在试验中,利用距离墙壁约 1 米的成像装置,对隐藏在墙角后方的高 1 厘米的字母和数字进行了图像重建。在四分之一秒的曝光时间,新技术可以获得分辨率为 300 微米的重建图像。 hsY?og_H  
X uE: dL?  
Ur]$@N  
图 | 不同曝光时长的模拟和重建实验。由于该方法对噪声的鲁棒性更强,因此与依赖 HIO 或 Alt-Min 等传统 PR 算法的系统相比,基于卷积神经网络( Convolutional neural networks,CNN) 的方法可以在更少的光线下运行,并获得更高的帧速率。(来源:论文)
W9w*=W )Z  
此前,麻省理工学院计算机视觉科学家拉梅什 · 拉斯卡尔(Ramesh Raskar)采用“主动成像”(active imaging)的方法,使用昂贵的专业相机 - 激光系统,实现对拐角处场景的高分辨率成像,用纳米超高速相机探测从墙壁反弹回来的光子,从而实现三维图像细节的逆向重建。 FfM^2`xP  
6Jq[]l"v  
但需要重视的是,除了需要使用专业相机之外,这种方式必须用激光扫描整个墙壁才能形成三维图像,整个成像过程光设备就耗资 50 万美元。直到 2018 年 3 月,新的算法以及相对经济实惠的 SPAD 相机出现,才使得这种方式削减一部分成本。 bKmwXDv'  
WtZI1`\qe  
“2012 年以来,飞行时间成像技术(time-of-flight imaging)的主要进步体现在,原先需要百万美元建造的系统,现在只需要数千美元。”联合作者 Richard Baraniuk 说。 8>[g/%W  
/a^ R$RHl'  
T4wk$R L  
图 | 在主动非视距成像中,激光在墙壁上反射到隐藏物体上并进一步散射,然后经过墙壁再次反射返回初始位置(来源:Stanford Computation Imaging Lab)
#at`7#K@  
飞行时间成像技术原理是,来自高速激光的光线从墙上反射到隐藏区域的物体上,其中一些光线会反射回墙壁再反射回相机,通过测量返回光子的飞行时间,可以判断飞行距离进行粗略成像。 2rT^OGw6  
Y&yfm/Ru  
Deep-inverse correlography 则是寻找墙上的干涉图样,也就是所谓的散斑图(speckle pattern)。散斑图包含着隐藏物体的形状信息,但重建完整图案需要解决极具挑战性的算法问题。短时曝光可以实现实时成像,但是噪声很多,会严重干扰现有算法。因此,该团队才想到了利用深度学习算法。 ciODTq?  
D {Ol8:  
与其他 NLoS 成像方法相比,深度学习算法可以通过准确地描述噪声,合成数据训练算法来解决重建问题,而不需要昂贵的试验训练数据。 g=4^u*  
sq`Xz 8u  
 "&k(lQ4  
图 | 研究人员在试验中,利用距离墙壁约 1 米的成像装置,对隐藏在墙角后方的高 1 厘米的字母和数字进行了图像重建。使用四分之一秒的曝光时间,新技术可以获得分辨率为 300 微米的重建图像(来源:Rice University)
<9ucpV  
联合作者 Ashok Veeraraghavan 说:“因此,我们正在讨论的是一个比飞行时间成像技术小得多的视野,这个视野接近几英寸而不是几米,但是,在这个有限的领域内,我们能够获得比它精确 100 倍的空间分辨率。” {>1FZsR49t  
an"~n`g  
接下来,研究人员计划把飞行时间成像技术和 deep-inverse correlography 相结合。“通过飞行时间技术,你可以获得一张粗略的图像,显示人在哪里,一旦你定位到了他们的胸牌或者脸,之后可以利用这项技术再得到一个超高清的局部图像。” O_1[KiZ  
3:nBl?G<  
该技术属于 DARPA(美国国防高级研究计划局,Defense Advanced Research Projects Agency)“揭露计划”(REVEAL program)的一部分。该计划耗资 2700 万美元,旨在通过活跃光场的开发,革命性地提高能见度。该项目为许多美国新成立的实验室提供资金。 FiiDmhu  
HQm_ K0$  
(来源:DeepTech深科技)
分享到:

最新评论

knightioll 2020-02-12 08:57
看起来很不错,但是实用性依旧要打个问号
星空38 2020-02-12 09:12
通过深度学习算法,利用普通的市售器件就能解决复杂的光学难题,这将对自动驾驶等领域产生极大的影响。
木子示羊 2020-02-12 09:22
高分辨率“透视”系统问世
蠊蠊 2020-02-12 09:44
只需搭配普通相机和一个功能强大的标准激光源,该系统就可以实现快速高分辨率对隐藏物体进行成像。
邻家百合 2020-02-12 09:46
高分辨率“透视”系统
伤城vs雾都 2020-02-12 09:53
厉害,学习中
tomryo 2020-02-12 09:54
高分辨率“透视”系统问世!斯坦福团队用普通器件解决光学难题
songshaoman 2020-02-12 09:55
微弱光探测,多角度成像?
wmh1985 2020-02-12 10:03
通过飞行时间技术,你可以获得一张粗略的图像,显示人在哪里,一旦你定位到了他们的胸牌或者脸,之后可以利用这项技术再得到一个超高清的局部图像。
wangjin001x 2020-02-12 11:07
高分辨率“透视”系统问世!斯坦福团队用普通器件解决光学难题
我要发表 我要评论
限 50000 字节
关于我们
网站介绍
免责声明
加入我们
赞助我们
服务项目
稿件投递
广告投放
人才招聘
团购天下
帮助中心
新手入门
发帖回帖
充值VIP
其它功能
站内工具
清除Cookies
无图版
手机浏览
网站统计
交流方式
联系邮箱:商务合作 站务处理
微信公众号:opticsky 微信号:cyqdesign
新浪微博:光行天下OPTICSKY
QQ号:9652202
主办方:成都光行天下科技有限公司
Copyright © 2005-2024 光行天下 蜀ICP备06003254号-1