對於失明或缺乏手指精細控制能力的人來說,自助服務機器的觸摸屏界面幾乎無法使用。然而,實驗性的新型BrushLens設備可以利用用戶的智能手機來完成工作。目前,BrushLens還處於功能原型階段,由密歇根大學助理教授郭安紅和副教授AlansonSample領導的團隊開發。
它本質上是一個高科技智能手機殼,頂部可以看到手機屏幕,底部有一個窗口供手機後置攝像頭感知。窗口周圍環繞著一圈"自動點擊器",它可以改變觸摸屏的電容,模擬手指觸摸。
BrushLens設備的底部,手機攝像頭窗口周圍有自動按鍵--另一個版本使用機械按鍵代替自動按鍵。
當裝有 BrushLens 的手機在大型觸摸屏表面移動時,手機就能通過攝像頭讀取顯示的文字。當手機經過這些文字時,一個配套的應用程序會說出這些文字。
當用戶想點擊任何顯示的文字時,他們可以點擊手機應用程序屏幕上的一個大的易於點擊的按鈕,或者利用手機現有的屏幕閱讀器功能(通過簡單的滑動或其他手勢進行選擇)。下一步,用戶還可以直接說出一個口令。
無論哪種情況,BrushLens 都會通過激活相關的部分做出響應,從而在底層觸摸屏的該部分上記錄觸摸操作。該屏幕上的顯示佈局被映射後,應用程序就可以用語言引導用戶進行操作。
為此,它將屏幕劃分為一個網格,並使用手機的加速度計跟蹤手機在網格中的位置。通過將屏幕上所需按鈕的網格位置與手機的網格位置進行比較,該應用就能告訴用戶該如何移動手機,直到到達按鈕為止。
BrushLens 應用程序通過將顯示屏劃分成網格來引導用戶穿過顯示屏 圖/計算機科學與工程系博士生陳亮
該技術已在 10 名志願者身上進行測試,其中 4 人有顫抖的癥狀,6 人是視障人士。在所有情況下,經過最初的學習曲線後,該設備都提高他們使用觸摸屏顯示器的能力。
當前版本的設備制造成本不到 50 美元,改進後的商業版本成本應該會低得多。除其他降低成本和減小尺寸的措施外,最終版本還可以由手機電池供電,並利用手機進行所有數據處理。
您可以在下面的視頻中看到兩個版本的 BrushLens 設備的使用情況。