將2D圖像打印成3D可觸 盲人離科學更近一步


一位視障人士想要成為科學傢,需要付出多少努力?作為視障人士,僅僅是閱讀期刊文章,對化學傢MatthewGuberman-Pfeffer來說都意味著要克服一系列困難:首先,他得下載PDF轉換成文本,再用閱讀器把文中句子大聲朗讀出來。閱讀器有時候不認識科學術語,有時會句子讀到一半念廣告,有時會把每個編號都讀出來,數據亂得讓人一頭霧水。這些都還不算大問題,對盲人來說,最大的攔路虎仍然是圖像。

原標題:登上Science!將 2D 圖像打印成 3D 可觸,盲人離科學更近一步

論文裡少不科學圖像,但視障人士慣用的盲文、轉語音等接收數據方式無法處理圖像,這大大限制他們學習科學的可能性。是時候讓科學變得更包容,更可得,這個世界需要一種可以被視障人士和一般人都輕松可視化的高分辨率數據格式。

於是四位視障學者與生物化學傢 Bryan Shaw 團隊合作,開發出一種讓盲人“閱讀”的簡單方法。這四位作者自出生或幼年就失明,是克服視覺障礙成為科學傢的極少數人;而 Bryan Shaw 帶頭這項研究,則是為幫助自己先天雙眼患有腫瘤的兒子“看到”科學的樣子。

這項研究提出的可視化方法是將圖像3D打印為可觸圖像,利用 lithphane 效應讓可觸圖像以視頻分辨率發光。以這種方式打印出的凝膠電泳圖、顯微圖、電子和質譜、教科書插圖等圖像,全都可以通過觸摸和視力兩種方式“看到”,準確率≥79% (n = 360)。

1

朝花夕拾

該研究中使用的 lithphane,其實並不新奇,這是一種被稱作“透光浮雕”的傳統藝術方式。研究者們嘗試此方法,是因為 lithphane 可以同時用觸摸和視力兩種方式“看到”。

Lithphane 通常是一塊薄薄的、半透明的浮雕,材料是薄瓷或蠟,通常厚度小於 2 mm。參考下圖A,Lithphane 在環境光或前照光下並不透明。但當光從背後射來時(如下圖B和C),Lithphane 就會像數字圖像一樣發光。

光通過半透明材料的散射,使得較薄的區域看起來更亮,而較厚的區域看起來相對暗,因此形成一種可視化效果。

就這樣,一塊薄薄的浮雕便具備成為通用可視化數據形式的要素:既能讓視障人士觸摸閱讀,也能讓普通人通過視覺觀看。

其實早在17 世紀,歐洲就已經有這種藝術,lithphane 甚至在唐朝時候就在中國出現。lithphane雖然早已存在,但從來沒有被當成過一種通用的可視化數據形式。

而 Bryan Shaw 發現 lithphane 的經歷也相當有趣:當時他和一個學生正在制作 3D 打印圖。Bryan Shaw說,“如果我們把這些圖做得更薄,就可以打印得更快,而且用的樹脂也更少。”

於是學生便將圖片做得像薯片一樣薄。Bryan Shaw 拿一張圖將其舉到燈光下,他發現那張圖不僅有3D的凹凸效果,而且透光後看上去就像一張照片。

那之後的一個禮拜,Bryan Shaw 都以為自己和學生發明一種新技術,然後才慢慢發現 lithphane 在 1000 多年前就被發明。眼下許多科學都在用新方式去使用舊技術,Bryan Shaw 的團隊很高興能夠實現這樣的「朝花夕拾」。

2

對比實驗

在研究中,學者們使用小型商用 3D 打印機來制作 Lithophane,成本小於5000 美元。研究團隊做對比實驗,比較視障對象、蒙眼對象和視力正常對象分別通過觸覺和視力來“閱讀” Lithphane 的效果。

一開始研究團隊使用生物化學中最常見的圖像:SDS-聚丙烯酰胺凝膠電泳。如果能讓視障人士“看見”電泳圖,那他們學習生命科學的機會就會大大提升。

SDS-聚丙烯酰胺凝膠電泳-對比實驗

受試對象分為三組,一組是106 名(有視力的)蒙眼對象與 5 名眼盲對象,他們被要求用觸覺來解釋 Lithphane 上的數據。

而另一組沒有被蒙住眼睛的、視力正常的對象(n= 106) 被要求用視力解釋 Lithphane。

為將 Lithphane 的清晰度與原圖像進行比較,第三組視力正常的對象被要求使用視力來解釋計算機屏幕上的原始數字圖像(n = 143)。

從上圖可以看出,在“閱讀”電泳的 Lithphane 形式時,眼盲對象的平均解釋準確率為93.3%,視力正常對象的平均解釋準確率為91.4%,蒙眼對象的平均解釋準確率為59.1%。通過視力在計算機屏幕上解讀數字圖像的準確率為 79.6%。

研究團隊又增加其他4種圖像(蝴蝶鱗片掃描電子顯微鏡圖、蛋白質質譜圖、鐵卟啉蛋白的紫外-可見(UV-vis)光譜、七鏈β折疊蛋白二級結構圖)的 Lithphane 形式並組織對比實驗。

團隊最終得出,5種 圖像 Lithphane 的平均解釋準確率為:眼盲對象為 96.7%視力正常對象的視覺解釋為 92.2%,蒙眼觸覺解釋為 79.8%。通過視力在計算機屏幕上解讀數字圖像的準確率為 88.4%。

針對約 80% 的問題,眼盲對象的觸覺準確度等於或優於直接的視覺解釋。這個結果表明, Lithphane 的確可以作為一種通用、共享、無障礙的數據格式。

Matthew Guberman-Pfeffer 用手指“閱讀” lithphane

3

Data for All

找到 Lithphane 這種通用可視化方法後,該研究團隊發散思路,尋找其他能將自定義 2D 圖像轉換為觸覺形式的方法。他們發現另一種常見的方法,即膨脹形式技術(swell form technology),也稱為“瞬間圖片”技術。

在這種技術中,專用紙(即“膨脹紙”)被用來制作柔軟、泡沫狀的可觸圖形。加熱時,紙張中的微米級酒精顆粒會在已用黑色墨水或墨粉打印的區域中引起膨脹(彩色墨水不凸起)。

黑色墨水部分凸起的可觸圖案

與 Lithphane 方法相比,膨脹形式技術的主要優勢在於比 3D 打印更快,而缺點是在精度、分辨率和可控性上無法與3D打印相比。

同時,團隊也在研究彩色數據的可視化。例如,熱圖和 2D 彩色圖的 Lithphane 可以通過投射單調灰度來制作。為能做到定量數據解釋,需要將數字圖像轉換為顏色空間,比如“立方螺旋(cubehelix)”。

Cubehelix是一種色盤生成算法,其生成的色表在轉換為灰度或替換色調後,其強度的變化不會有影響。

該研究合著者Mona Minkara也是一位視障科學傢,她興奮地表示,這項研究可以徹底改變她與學生的溝通方式,因為視障學者可以和健康人士同時討論相同的信息。隨著類似研究的不斷豐富,數據的普遍可訪問性將成為社會基礎,這種無障礙的境界正是科學的最大意義。

在這幾位視障學者的就學經歷中,他們都遇到過很多障礙,並意識到盲人是不鼓勵學習科學的,也一直被排除在實驗室之外。但在科學面前,這種能力主義其實大可不必——

原子和分子小於 250 nm,恰好是可見光的衍射極限。面對這種尺度的科學,人類的視覺也派不上用場,必須使用光譜學、顯微鏡,或者培育出能夠衍射 X 射線(或中子、電子)的晶體來進行研究。而對於視障人士來說,為深探科學而為自己制作人工眼睛,這才是科學帶來的平等。


相關推薦

2023-11-11

大型重建模型(LRM),他們認為該模型能夠通過單張二維圖像預測三維模型的形狀,而且隻需 5 秒鐘即可完成。研究人員在論文中解釋說,以前的三維生成模型是在專註於單一圖像類別的小規模數據集上進行訓練的。相反,他們

2022-09-23

正在創建一個受蜜蜂啟發的系統的原因,它使用飛行的3D打印無人機來完成這項工作。這項技術被稱為空中增材制造(Aerial-AM),由倫敦帝國理工學院和瑞士聯邦材料科學與技術研究所(EMPA)的研究人員開發。它實際上結合兩種

2023-01-15

間裡幹啥……多人追蹤也是soeasy。過程中完全不需要拍下圖像、不需要攝像頭。輸入的僅是WiFi一維信號,輸出則是三維人體姿態。兩臺路由器即可搞定!換算成本都不到500塊。而且還不受環境光線、目標被遮擋的影響,效果接

2022-08-03

,視覺指令有幾個關鍵問題,就像樂高套裝一樣,完全由圖像組成:識別 2D 和 3D 對象之間的對應關系,以及處理許多基本部件都非常困難。研究人員表示在,任何復雜的樂高套裝都是建立在基礎的樂高磚塊上。研究人員表示這

2024-01-10

1月10日消息,據外媒報道,根據埃隆·馬斯克(Elon Musk)旗下社交媒體平臺X(前身為推特)發佈的一篇新博客文章,該公司今年將推出類似於Venmo或PayPal的點對點支付服務,旨在提高“用戶效用並帶來新的商業機會”。該服務的推

2022-08-22

軌航天器用來確定大氣層的化學成分和離子能量分佈。3D打印和激光切割的硬件的性能表現跟最先進的半導體等離子體傳感器一樣好。由於制造過程需要一個潔凈室,所以半導體等離子體傳感器非常昂貴且需要數周的復雜制造。

2022-07-10

在21世紀,這種加工方式被賦予一個更貼切的名字——3D打印。盡管3D打印是一項擁有長遠歷史的生產方式,在工業領域或高價值制造領域也獲得廣泛的應用,比如F1賽車氣動設計時就大量使用3D打印技術。但在消費領域,3D打印技

2024-03-07

在紐約獲批匯款許可證,這使得X平臺距離提供支付功能更近一步。在摩根士丹利科技、媒體和電信會議上,馬斯克表示,X下個月左右將在加州獲得牌照,紐約獲得批準可能“幾個月後”。自2022年以來,馬斯克始終致力於將其變

2024-03-19

或文件,相反,Substance 使用的是通過文字描述生成的 2D 圖像,並以 3D的方式加以應用。Substance 3D Sampler 4.4 測試版和 Stager 3.0 測試版分別提供新的"文本到紋理"和"生成背景"功能。這兩項功能在測試版中都是免費的

2023-03-23

渥太華大學的研究人員已經確定影響3D打印食品質量和復雜性的因素。該研究發表在《流體物理學》上,強調在食用材料的增材制造中考慮這些因素以提高質量、控制和效率的重要性。這有可能有助於解決全球食品供應和營養挑

2022-10-02

越時空AI 技術在古老建築修復領域主要涉及:需要高精度圖像作為基礎。某些破損及裂縫地方,研究人員還要進行樣本采集和標定,以獲得足夠的樣本產生高精度的影像 3D 模型。Design by:NeoMam 工作室當數據足夠時,AI 就會進行

2023-03-22

章展示一種數字烹飪方法,用可食用食物“墨水”通過3D打印系統制造芝士蛋糕(包含花生醬、能多益巧克力醬和草莓果醬)。研究團隊認為,精準打印多層食物讓人們能制造更定制化的食物,改善食品安全,更輕松地控制食物

2022-08-22

亞州立大學 (數學學位),後在Yandex數據分析和計算機科學中心學院學習機器學習,現為蒙特利爾大學的一位博士生。他的主要研究方向為跟草圖有關的計算機視覺轉換。另一位作者名叫Mikhail Bessmeltsev,是一作的導師,蒙特利

2023-08-21

的顯示和打印十分困難,傳統方法是使用位圖格式來存儲圖像,但這需要非常大的存儲空間和內存空間。John Warnock 開發的 InterPress,其原理是按一定規則向電腦描述圖像的組成格式,例如大小,形狀,色彩等,即不用存儲整個圖