科學傢結合腦電頭盔與AI算法來分析重建拐角處光線投射的二維物體


在科幻作品中,我們已見到過不少對“透視眼”的描述。但在AI的加持下,格拉斯哥大學的一支研究團隊,也介紹瞭一種看到拐角處隱藏物體的新方法。據悉,這套“鬼影成像”(GhostImaging)系統能夠讀取一個人的腦電波、觀察從墻上散射的光線,以識別無法被肉眼直接觀察到的被遮擋物體。

實驗示意(來自:Optica)

近年來,已有諸多團隊投入“非視距”(NLoS)成像的新興研究。比如將激光束打到表面上、待拐角處返回的信息回到相機傳感器,然後使用算法分析返回的散射光線來解碼拐角處的物體。

在近日發表於《Optica》光學網站上的一篇新文章中,研究人員將相機換成瞭人眼。實驗設置瞭投影到紙板切口上的光圖案,然後要求受試者觀察白色墻壁上的漫射光。

不過僅憑這一點,我們還是無法清晰分辨出原來的物體。但這,就是人工智能技術可以派上用場的地方瞭。

研究人員為受試者戴上瞭腦電(EEG)頭盔,以讀取他們視覺皮層中的信號。這些信號被輸入運行 AI 算法的筆記本電腦,接著解碼散射光並識別物體。

結果發現,腦電信號的強度,與墻壁不同區域的光強度大致相關 —— 因而算法能夠在此基礎上、於漫射光中“雕刻”出正確的圖像。

測試期間,每個“物體”其實都是個 16×16 像素的圖像,且光圖案會以 6 Hz 的頻率閃爍兩秒鐘。欣喜的是,經過大約一分鐘的光線觀察,AI 系統就能夠準確地重建各個物體。

項目首席研究員 Daniele Faccio 表示,這是其首次通過在實時調節成像過程的神經反饋回路中,使用人類視覺系統來執行計算成像。

盡管有標準檢測儀器來代替人腦分析墻壁的漫射光信號,但他們還希望有朝一日可找到用於增強人類能力的方法。

後續研究團隊將把成像物體從二維升級到三維,並考慮同時結合來自多個觀察者的數據。

感興趣的朋友,可留意他們在 7 月的“光學成像和應用光學大會”(Optica Imaging and Applied Optics Congress)上發表的完整版研究報告。


相關推薦

2023-03-09

人類眼中所見如何轉化為腦中圖像,這是神經科學傢一直努力破解的問題。隨著研究的不斷深入,如今人工智能(AI)在模仿上述圖像轉化過程方面表現得越來越好。近日,在日本研究團隊開展的一項新研究中,AI可以通過讀取

2022-09-09

。不過,差評君仔細研究一下發現:這可能隻是一個嚴肅科學界的烏龍事件。這個名為 SIKE 的算法之所以 “ 一碰就碎 ”,還得從算法的內核說起。在這個幺蛾子之前,SIKE 算的上是 21 世紀的算法新星。這個算法是一

2023-11-11

訓練。研究人員解釋說,大容量模型和大規模訓練數據的結合為 LRM 算法提供"高度通用"的內容創建能力。論文稱,該模型能夠從包括真實世界照片在內的各種測試圖像中生成"高質量"的三維重建。此外,LRM 還能將

2023-04-07

現可以說是計算機視覺領域的GPT-3時刻。英偉達人工智能科學傢 Jim Fan 表示此次SAM最大的一點突破是它已經基本能夠理解“物品”的一般概念,即使對於未知對象、不熟悉的場景(例如水下和顯微鏡裡的細胞)它都能比較準確的

2023-03-10

幻的場景或通過AI就能實現。近日,來自日本大阪大學的科學傢通過讀取大腦的掃描圖像,AI就能夠重建人們看到的真實景象相近的圖像。研究人員表示,隨著AI技術的發展有望將其應用於多種場景,比如探索各種動物如何感知世

2022-07-11

追求品質感觀影和娛樂體驗的用戶群體,通過各種軟硬件結合獨到功能點,滿足用戶對高端旗艦投影儀使用體驗的期待。YOGA 7000智慧操作的便捷、在同類產品中超凡脫俗的設計質感,加上對於高端投影儀而言相當重要的無損光學

2024-05-10

更薄、更輕、質量更高。這種技術能否將增強現實(AR)頭盔提升到一個新的水平?斯坦福大學的全息 AR 眼鏡原型。目前,實驗室版本的視場角很小,在實驗室裡隻有 11.7 度,遠遠小於 Magic Leap 2 甚至微軟 HoloLens。但是,斯坦福

2022-08-05

材料沉積,即使所有的噴嘴遵循相同的運動軌跡,”首席科學傢Jeremy Cleeman表示。“我們還開發一個熱模擬,以幫助我們更好地解發生在不同截面界面的粘合。通過調整各種參數,我們可以確保沉積的長絲將正確地粘合到相鄰的

2024-03-04

薩斯大學奧斯汀分校任助理教授,同時是英偉達高級研究科學傢。早先作為斯坦福視覺與學習實驗室成員,朱玉可師從李飛飛與 Silvio Savarese 教授。李飛飛團隊開發機器人訓練框架 SURREAL,用來加速學習過程,而朱玉可和范麟熙

2023-05-15

,連AI都不用。有人在評論中分享這樣一篇文章——神經科學傢利用生成式AI直接從大腦解碼語言序列。https://www.nature.com/articles/s41593-023-01304-9.epdf在Nature的這篇文章中,研究者使用被動BCI(腦機接口)和GPT模型,使用fMRI對患者的

2022-09-21

大學洛杉磯分校的雅克·維達爾(Jacques Vidal)教授首次在科學文獻中提出“腦機接口”這一專業術語,並提出一個關鍵問題:能否將可觀測的腦電信號用作人機通信中的信息載體,或是控制假肢、宇宙飛船之類的外部設備。1977

2023-05-07

號後,立馬就給出下面這樣的結果。而在這次的研究中,科學傢們更進一步,新算法構建的人工神經網絡模型,不僅能捕捉大腦動態、準確地重構畫面,還能預測出小鼠能看到的東西。另外,它還可以用來預測靈長類動物手臂的

2022-08-14

格的卡通犀牛,但AI卻做不到。直到現在,這一點終於被科學傢攻克!最新研究發現,隻要給AI喂3-5張圖片,AI就能抽象出圖片裡的物體或風格,再隨機生成個性化的新圖片。有網友評價:非常酷,這可能是我這幾個月來看到的最

2023-01-19

的重點是將二維材料作為矽的潛在替代品。但在此之前,科學傢們必須首先找到一種方法,在保持其完美結晶形態的同時,在工業標準矽片上設計這種材料。近期,麻省理工學院(MIT)的工程師們似乎找到一個可能的解決方案,