无主之地2配置高吗|看真人裸体BBBBB|秋草莓丝瓜黄瓜榴莲色多多|真人強奷112分钟|精品一卡2卡3卡四卡新区|日本成人深夜苍井空|八十年代动画片

網易首頁 > 網易號 > 正文 申請入駐

MIT團隊實現“穿墻透視”,用的是你手機里就有的傳感器

0
分享至



2012 年,MIT 的 Ramesh Raskar 團隊在 Nature Communications 上首次演示了用超快飛行時間成像技術重建拐角后方物體的三維形狀。那套系統需要飛秒激光器和精密光學平臺,整套設備造價在 50 萬到 100 萬美元之間,占滿一整間實驗室。

十四年后,Raskar 實驗室的博士生 Siddharth Somasundaram 用一顆批量售價 3.6 美元的意法半導體傳感器,做到了類似的事情。

這項成果 5 月 20 日發表在 Nature 上。Somasundaram 團隊使用的是一種便攜式智能手機級激光雷達系統,核心是意法半導體的 VL53L8CX 芯片,一顆只有 6.4 毫米見方的飛行時間傳感器,內置 940 納米垂直腔面發射激光器和單光子雪崩二極管(SPAD)探測器陣列,能以每秒 30 幀的速度捕獲深度數據。整套硬件成本不到 100 美元,不需要任何額外校準,卻能探測到拐角后方被遮擋的物體。


圖丨消費級非視距成像(來源:Nature)

這種聽起來近乎科幻的效果背后的原理其實并不神秘。核心就是激光雷達發射激光脈沖,光打到墻面后反射,一部分光繼續彈射到墻后隱藏的物體上,再反射回墻面,最終被傳感器接收。通過分析這些經過多次反彈的極微弱光信號的飛行時間,就能推算出隱藏物體的位置和形狀。而墻面在這個過程中充當了一面“虛擬鏡子”。

這個方向在學術界已經發展了十多年,被稱為非視距成像(Non-Line-of-Sight Imaging,NLOS)。2018 年 O'Toole 等人在 Nature 上提出的光錐變換(Light-Cone Transform)方法讓重建算法效率提升了三個數量級,但硬件門檻始終沒有降下來。

實驗室級系統使用的單光子探測器靈敏度極高、時間分辨率達到皮秒級別,能從微弱的多次反射信號中提取足夠的信息完成重建。消費級傳感器做不到這一點:激光功率受限于人眼安全標準,曝光時間因為要處理動態場景而很短,空間分辨率也很低。單幀數據里的信噪比根本不夠用。

Somasundaram 的思路是放棄從單幀中提取信息,轉而融合大量幀的數據。他提出了一個叫“運動誘導孔徑采樣”(Motion-Induced Aperture Sampling,MAS)的模型,把物體形狀、物體運動和相機運動三個因素統一到同一個測量框架里。

其靈感來自兩個成熟技術:智能手機相機的連拍模式通過合并多張照片來提升畫質,合成孔徑雷達通過綜合多個天線位置的信號來獲得等效于大型天線的分辨率。MAS 模型做的是類似的事情,利用相機的自然手持晃動來擴大虛擬孔徑,同時利用多幀之間的冗余信息來提高信噪比。


圖丨運動誘導孔徑采樣模型(來源:Nature)

“一旦我們開發出能夠跨多次測量合并信息的算法,隱藏的信號就開始清晰地浮現出來了?!盨omasundaram 對媒體表示。

團隊在論文中演示了三項能力。第一項是三維重建:讓相機在墻面前自然移動,系統能重建出墻后靜止物體的三維形狀。

第二項是物體追蹤:已知物體的大致形狀后,系統能實時追蹤它在三維空間中的運動軌跡,甚至能同時追蹤多個物體。團隊還演示了一個手部追蹤的應用,用戶戴上回射手套后,系統可以追蹤被遮擋的雙手位置。

第三項能力是用隱藏物體作為路標來定位相機自身的位置。當機器人面對一面白墻這樣缺乏紋理特征的環境時,傳統的視覺里程計會失效,但如果墻后面有已知物體,NLOS 信號反而能幫助機器人確定自己在哪里。

這三項能力都實現了實時在線處理。追蹤任務使用了粒子濾波算法,用 1,000 個粒子來表示物體位置的概率分布,每一幀根據運動先驗傳播粒子、根據實測數據評估權重、然后重采樣,整個過程在 30Hz 幀率下運行。

但現在的效果還遠遠達不到科幻電影里的透視畫面。Somasundaram 自己也提醒,系統恢復的是極弱信號中的稀疏幾何和運動信息,和手機上幾百萬像素的清晰圖像之間還有巨大差距。

系統目前依賴一些較強的假設:物體的形狀和運動在幀與幀之間保持相對一致,這樣才能把許多極弱的測量累積成較強的信號。如果人突然改變姿態,或者物體被部分遮擋導致形狀突變,或者相機發生劇烈抖動,這些假設就會失效。

論文也指出,面對復雜的真實世界反射特性,手工設計的評分函數很難穩健地工作,未來可能需要機器學習來學習更好的匹配策略。

對漫反射物體的效果也明顯不如回射材料。論文中雖然證明了 MAS 模型在漫反射條件下仍然可用,但信號質量因為光強的四次方衰減和非共焦路徑的干擾而顯著下降。

真正讓這篇論文上了 Nature 的,可能不是某一項具體能力有多強,而是它所指向的范式轉換。過去做 NLOS 成像研究,光是搭建實驗平臺就需要數萬美元和數小時的校準。Somasundaram 團隊證明,一顆量產的現成 SPAD 傳感器就能完成追蹤和定位任務,不需要任何物理校準或額外硬件。團隊已經在 GitHub 上公開了全部代碼。

“我們認為最重要的意義在于技術的民主化,”Somasundaram 說?!爱斶@樣的技術變得人人可及時,人們往往會發現遠超原始研究者想象的應用?!?/p>

自動駕駛汽車在盲區路口提前感知行人和車輛,倉庫機器人在雜亂環境中避開拐角后的障礙物,AR 頭顯更準確地追蹤用戶的身體姿態,這些都是論文中列舉的潛在方向。但就像 Somasundaram 所說,真正的應用可能來自他們沒有想到的地方。

參考資料:

1.https://www.nature.com/articles/s41586-026-10502-x

2.https://spectrum.ieee.org/smartphone-grade-lidar

運營/排版:何晨龍

注:封面/首圖由 AI 輔助生成

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
61歲的王姬駕馭一身黑色禮服,這身材讓年輕人都望塵莫及

61歲的王姬駕馭一身黑色禮服,這身材讓年輕人都望塵莫及

大江
2026-05-24 12:20:25
阿斯談姆巴佩:16年禁區內的一次腦震蕩,導致他至今懼怕頭球

阿斯談姆巴佩:16年禁區內的一次腦震蕩,導致他至今懼怕頭球

懂球帝
2026-05-30 20:30:13
讀懂了《烏合之眾》,你就知道人是如何被降智的

讀懂了《烏合之眾》,你就知道人是如何被降智的

洞見
2026-03-21 23:21:41
炸裂預警!未來三年全球十大驚悚預言逼近現實(2026-2028)

炸裂預警!未來三年全球十大驚悚預言逼近現實(2026-2028)

神奇故事
2026-05-27 21:50:31
歐冠決賽魔咒:首球即冠軍?阿森納與巴黎誰能打破十年定律

歐冠決賽魔咒:首球即冠軍?阿森納與巴黎誰能打破十年定律

星耀國際足壇
2026-05-30 21:40:20
為什么人一旦覺醒,就會斷絕90%的朋友

為什么人一旦覺醒,就會斷絕90%的朋友

洞見
2026-05-28 22:05:54
為何借道庫爾德,推翻神棍政權的計劃最終會擱淺?

為何借道庫爾德,推翻神棍政權的計劃最終會擱淺?

西樓飲月
2026-05-30 21:06:40
今夜的歐冠決賽,沒有法蘭西,也沒有英格蘭

今夜的歐冠決賽,沒有法蘭西,也沒有英格蘭

生活新鮮市
2026-05-30 20:17:11
西方精心搭臺“圍堵”中國,香會中國專場徹底取消,中方直接離場

西方精心搭臺“圍堵”中國,香會中國專場徹底取消,中方直接離場

腦洞時史
2026-05-29 19:45:20
隆多慶祝兒子畢業,他面試鵜鶘主教練,二婚娶美女,兒子沖NBA

隆多慶祝兒子畢業,他面試鵜鶘主教練,二婚娶美女,兒子沖NBA

大西體育
2026-05-30 10:11:28
國米2500萬歐元,想要打包利物浦三星,夏窗撿漏美夢能否成真?

國米2500萬歐元,想要打包利物浦三星,夏窗撿漏美夢能否成真?

寶哥愛足球
2026-05-29 17:11:57
“死在家里,沒人嫌棄你”——這是22歲老狗臨終時,人給它的最后一句情話

“死在家里,沒人嫌棄你”——這是22歲老狗臨終時,人給它的最后一句情話

消化石醫生
2026-05-25 12:12:28
上海16區區長、街道辦主任、鎮長等值班電話公布!

上海16區區長、街道辦主任、鎮長等值班電話公布!

愛看劇的阿峰
2026-05-30 20:27:28
睡覺七小時被推翻了?醫生建議:過了55歲,睡覺盡量要做到這4點

睡覺七小時被推翻了?醫生建議:過了55歲,睡覺盡量要做到這4點

健康科普365
2026-05-30 18:50:05
陳幸同29歲生日反差感太酷!深夜公園開香檳盡顯松弛,國乒神秘好友送祝福

陳幸同29歲生日反差感太酷!深夜公園開香檳盡顯松弛,國乒神秘好友送祝福

好乒乓
2026-05-30 12:14:43
47歲高圓圓在公園被抓拍,麒麟臂、涼拖鞋,活脫脫一個買菜大姐

47歲高圓圓在公園被抓拍,麒麟臂、涼拖鞋,活脫脫一個買菜大姐

胖松松與瘦二毛
2026-05-06 12:40:53
馬科斯連夜釋放中國公民!菲律賓慌了:就怕中國殺雞用宰牛刀!

馬科斯連夜釋放中國公民!菲律賓慌了:就怕中國殺雞用宰牛刀!

80后房車生活
2026-05-29 20:42:25
10萬億窟窿!比恒大更坑的民企來了,曾力壓許家印,位居第一

10萬億窟窿!比恒大更坑的民企來了,曾力壓許家印,位居第一

孤單是寂寞的毒
2026-03-04 15:38:03
臺灣網紅館長參觀張雪機車,張雪為何會給足排面全程陪同接待!

臺灣網紅館長參觀張雪機車,張雪為何會給足排面全程陪同接待!

總在茶余后
2026-05-31 00:37:44
美國發話也不行,中方正式通告全球:打日本,中國具備“正當性”

美國發話也不行,中方正式通告全球:打日本,中國具備“正當性”

鳳語談
2026-05-28 12:13:58
2026-05-31 01:36:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技評論獨家合作
16770文章數 514989關注度
往期回顧 全部

科技要聞

車圈大佬發聲:價格戰遠去,但競爭仍殘酷

頭條要聞

兩名9歲女孩被困電梯近2小時 求救幾十次物業無動于衷

頭條要聞

兩名9歲女孩被困電梯近2小時 求救幾十次物業無動于衷

體育要聞

歲月不饒人!39歲德約鏖戰近5小時拼到嘔吐

娛樂要聞

張碧晨《歌手》 “活人微死” 自嘲

財經要聞

雙匯管不住一頭豬

汽車要聞

900V+3.2秒破百 領克10+&領克10上市16.99萬元起

態度原創

教育
本地
健康
時尚
公開課

教育要聞

26歲女教師賽課時猝死!老師,一路走好,愿天堂沒有賽課

本地新聞

用剪紙的方式,打開江蘇揚州

嘗試干細胞療法如何避免踩坑?

美回巔峰的她們,帶火的這些爆款真的好用嗎

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關懷版