BrushLens技術可讓操作不便的人也能控制觸摸屏


對於失明或缺乏手指精細控制能力的人來說,自助服務機器的觸摸屏界面幾乎無法使用。然而,實驗性的新型BrushLens設備可以利用用戶的智能手機來完成工作。目前,BrushLens還處於功能原型階段,由密歇根大學助理教授郭安紅和副教授AlansonSample領導的團隊開發。

無標題.webp

它本質上是一個高科技智能手機殼,頂部可以看到手機屏幕,底部有一個窗口供手機後置攝像頭感知。窗口周圍環繞著一圈"自動點擊器",它可以改變觸摸屏的電容,模擬手指觸摸。

1.webp

BrushLens設備的底部,手機攝像頭窗口周圍有自動按鍵--另一個版本使用機械按鍵代替自動按鍵。

當裝有 BrushLens 的手機在大型觸摸屏表面移動時,手機就能通過攝像頭讀取顯示的文字。當手機經過這些文字時,一個配套的應用程序會說出這些文字。

當用戶想點擊任何顯示的文字時,他們可以點擊手機應用程序屏幕上的一個大的易於點擊的按鈕,或者利用手機現有的屏幕閱讀器功能(通過簡單的滑動或其他手勢進行選擇)。下一步,用戶還可以直接說出一個口令。

無論哪種情況,BrushLens 都會通過激活相關的部分做出響應,從而在底層觸摸屏的該部分上記錄觸摸操作。該屏幕上的顯示佈局被映射後,應用程序就可以用語言引導用戶進行操作。

為此,它將屏幕劃分為一個網格,並使用手機的加速度計跟蹤手機在網格中的位置。通過將屏幕上所需按鈕的網格位置與手機的網格位置進行比較,該應用就能告訴用戶該如何移動手機,直到到達按鈕為止。

2.webp

BrushLens 應用程序通過將顯示屏劃分成網格來引導用戶穿過顯示屏 圖/計算機科學與工程系博士生陳亮

該技術已在 10 名志願者身上進行測試,其中 4 人有顫抖的癥狀,6 人是視障人士。在所有情況下,經過最初的學習曲線後,該設備都提高他們使用觸摸屏顯示器的能力。

當前版本的設備制造成本不到 50 美元,改進後的商業版本成本應該會低得多。除其他降低成本和減小尺寸的措施外,最終版本還可以由手機電池供電,並利用手機進行所有數據處理。

您可以在下面的視頻中看到兩個版本的 BrushLens 設備的使用情況。


相關推薦

2022-08-18

,而表現最好的汽車隻需要300米。巨大差異最容易理解和操作的汽車在很大程度上是2005款沃爾沃V70。這四項任務在十秒鐘內完成,其間汽車以110公裡/小時的速度行駛306米;在天平的另一端,中國電動汽車MG Marvel R的表現差得多

2024-03-15

配置交互式用戶界面,使用戶能夠控制與無線耳機相關的操作,可以增強耳機盒的實用性,改善用戶對無線耳機的控制。"在一個實施方案中,蘋果公司設想通過耳機盒控制 Apple Music,方法是使用帶有圖形用戶界面(GUI)的電

2022-09-03

有這種功能。為彌補這一差距,從ChromeOS 105開始,Google的操作系統可以將按鍵變成模擬觸摸。據Google稱,我們認為遊戲控制是克服ChromeOS遊戲體驗初期挑戰的一種方式,同時用戶在等待開發者為ChromeOS全面優化他們的應用。外界

2023-01-12

官方已經決定正式量產觸摸屏Mac,大概率將繼續預裝macOS操作系統。至於為何不采用與觸摸操作更適配的iPadOS,可能是因為兩個系統之間的互通性不足,不過它們現在也越來越像,未來不排除完全互通的可能。自蘋果成立以來,

2022-06-28

電器股份有限公司董事長兼總裁董明珠談到格力的一項新技術,用在空調領域可以降低用電近百分之八十幾。如果在全球推廣實現的話,可以讓氣溫緩慢減少上升0.5度。董明珠強調,這十年來,我們企業敢於去投入,並不是以盈

2022-09-25

在iOS16.1測試版中,蘋果為第二代AirPodsPro的用戶提供禁用音量觸摸控制的能力。新的AirPodsPro的一個新增功能是用戶可以通過在AirPodsPro耳機柄觸摸傳感器上向上或向下滑動來增加或減少音量。雖然有些用戶可能會覺得這個功能很

2023-01-17

程序,放大照片,等等。除此以外,創作者也可以利用該技術進行編輯。由於蘋果公司正逐步致力於在多個平臺上統一軟件體驗,該公司整合類似的輸入法以實現無縫操作是有意義的。目前,蘋果允許開發者在Mac上移植他們的應

2024-04-03

力和猜測,才能準確地按下屏幕進行選擇。蘋果公司的新技術將利用小型雷達發射器和接收器陣列解決這些問題,從而極其精確地追蹤手指或其他物體。根據蘋果公司的專利文檔中描述,嵌入筆記本電腦或其他設備外殼中的雷達

2022-09-21

,如"我餓"。亞馬遜表示,它與聯合脊柱研究所的技術訪問倡議合作,以獲得對這些新功能的反饋,並解它如何能夠幫助有語言和行動障礙的用戶更加獨立。

2022-08-30

機器人大賽不同,盡管 XPRIZE 也通過面向全球的比賽推動技術發展,但其展開的比賽卻圍繞氣候環境變化、糧食危機、熱帶雨林保護等領域。本次面向機器人領域的 Avatar XPIZE 也和 DARPA 的機器人比賽有所不同,目的是尋找能夠將

2024-03-22

最新披露的研究顯示,蘋果公司正在考慮模仿iPhone的玻璃後殼,推出全玻璃MacBookPro,該產品還可能配備觸摸屏。如果你隻看最新披露的專利申請"電子設備",你會認為觸摸屏元素比玻璃背板MacBookPro更不可能出

2023-01-24

筆記本電腦顯示屏,將觸摸傳感器直接集成到面板中,該技術預計將在下周的新GalaxyBook型號中首次亮相。這些面板使用OCTA,即on-cell觸摸AMOLED技術來實現這一壯舉,這使它們比使用單獨的觸摸屏面板薄膜的解決方案更薄。這也是

2023-11-20

將成為首款配備OLED屏幕的iPad。然而,這僅僅是這種顯示技術開始運用到產品的開始,因為該公司計劃將其應用到未來的Mac中。最新消息顯示,蘋果預計將在2026年至2027年推出帶觸摸屏功能的OLEDMacBookPro機型。據報道,蘋果將在未

2022-08-31

壓,久坐也不會感到不適,座椅的扶手上還設置觸摸屏,可讓用戶更加方便的操作儀表盤和顯示器。此外,除乘坐的舒適性,這款座椅下面的空間有所擴大,便於廠商配備更多的電池,從而延長純電動車的續航時間。