可穿戴聲納利用聲音而非攝像頭追蹤面部表情


康奈爾大學的工程師們開發一種新的可穿戴設備,可以通過聲納監測一個人的面部表情,並在數字頭像上重現它們。將攝像頭從方程中移除可以緩解隱私問題。

該團隊稱該設備為EarIO,由一個帶有麥克風的耳機和兩側的揚聲器組成,可以連接到任何常規耳機上。每個揚聲器向佩戴者的面部發射超出人類聽覺范圍的聲音脈沖,而回聲則由麥克風接收。

當用戶做出各種面部表情或說話時,回聲配置文件將因用戶的皮膚移動、拉伸和皺起的方式而發生輕微改變。經過專門訓練的算法可以識別這些回聲配置文件,並迅速重建用戶臉上的表情,將其顯示在數字頭像上。

“通過人工智能的力量,該算法發現肌肉運動和面部表情之間的復雜聯系,而這些聯系是人眼無法識別的,”該研究的共同作者李克說。“我們可以利用這一點來推斷出更難捕捉的復雜信息--整個面部的正面。”

研究小組在16名參與者身上測試EarIO系統,在一個普通的智能手機上運行該算法。果然,該設備能夠重建面部表情,其效果與普通相機一樣好。風聲、說話聲或街道噪音等背景噪音並沒有幹擾其識別面部的能力。

該團隊表示,聲納比使用相機有一些優勢。聲學數據需要的能量和處理能力要少得多,這也意味著設備可以更小、更輕。相機還可以捕捉到大量用戶可能不打算分享的其他個人信息,所以聲納可能更私密。

至於可能使用這項技術的目的,它可能是一種在遊戲、VR 或虛擬世界的數字化身上復制你的物理面部表情的便捷方式。

該團隊表示,仍然需要進一步的工作,以調出其他幹擾,如用戶轉頭時,並簡化人工智能算法的訓練系統。

這項研究發表在《計算機協會互動、移動、可穿戴和泛在技術期刊》上。


相關推薦

2022-09-22

。暴風雨3D AudioTech-讓自己置身於令人難以置信的真實的聲音場景中,遊戲中的音頻會根據你的位置和頭部運動動態調整。當角色在你耳邊低語時,你會感覺到他們的存在,通過炮火或腳步聲定位好友和敵人,並體驗來自任何方

2023-11-13

款產品:AI Pin。AI Pin 是一款半個煙盒大小的無屏幕、可穿戴設備,由設備本體和磁吸式電池兩部分組成,總重 54g 左右,既可以將設備本體置於衣服外側,電池置於衣服內側,通過磁力夾在衣服上;也可以通過額外配置的小夾子

2022-06-22

格相比,這是相對適中的。一些報道稱,蘋果的頭戴式可穿戴設備價格可能高達 3,000 美元。在處理能力方面,Quest 2 Pro 可能缺乏一些急需的動力,因為 Kuo 預測高通的 Snapdragon XR2 將為耳機提供動力。相比之下,據說蘋果的 AR 頭

2024-04-01

機構,因此很難獲得機器人運動學的運動方程。研究人員利用基於視覺的自我監督學習方法克服這一難題,在這種方法中,機器人可以通過觀察鏡子中的自己來學習運動指令與所產生的面部表情之間的關系。機器人的面部表情由

2024-04-02

種族、教育程度、就業狀況和政治傾向--並明確指示他們利用這些信息,專門為他們所面對的人起草論據。值得註意的是,這實際上使人類辯手的表現比沒有信息的情況下更差。但是,人工智能卻能利用這些額外的數據發揮巨大

2022-08-25

感器本身具有 400×400 分辨率和超低功耗,能夠為輕巧可穿戴的電池供電設備(比如增強現實智能眼鏡)提供有力的支撐。OmniVision 表示,超低功耗對這類采用電池供電的設備至關重要,每個系統可配備 10 個或以上的攝像頭。而

2024-04-07

。開發人員可以使用Hume AI的API構建個人AI助手、代理和可穿戴設備等等,產品可涵蓋從AI助手到健康管理、從教學輔導到客戶服務等各個領域。但同時,人們可能會對Hume的EVI產生依賴或以一種不健康的方式沉迷於它的潛力,該技

2022-10-15

壓力。(2)其次,蘋果正在為其 AR / VR 頭顯配備十幾個攝像頭。它們能夠捕捉動作,將現實世界的運動轉化為虛擬版本 —— 甚至可能分配兩個專門用於捕捉腿部運動的攝像頭。通過合力使用這些攝像頭,蘋果頭顯將能夠制環境

2024-02-07

相似之處,其中畫面與性能的平衡是個難點;此外,如果利用好新的交互技術比如眼動、手部追蹤技術是另一個難點。而且,對於資金實力並不雄厚的普通開發者,Vision Pro設備成本太高,與缺乏成熟的開發者社區(意味著更高

2022-08-30

也能通過電機的電流感應刺激,感受到手指的細微觸感。利用這套設備,在半決賽時,NimbRo 機器人完成包括煮咖啡、下棋、玩拼圖遊戲,測量高血壓、體溫、血氧飽和度等操作,還幫助需要幫助的人穿上夾克,這都讓這臺機器

2022-07-07

成為蘋果硬件產品線的重要組成部分。這款產品隸屬於可穿戴、傢用和配件部門,該部門上一財年創收384億美元,約占蘋果總營收的10%。但智能手表和可穿戴健身設備競爭非常激烈,Apple Watch的競品包括GoogleFitbit和三星的產品。

2023-11-10

佈其首款產品——一枚售價699美元嵌入最前沿AI技術的可穿戴設備AIPin,使用者可以將形態類似於別針的該產品戴於衣領上。這傢由前蘋果設計師們創立的Humane當地時間周四在一段視頻中宣佈其首款基於AI的硬件產品。產品發佈後

2024-03-06

阿尼西莫夫(Dmitry Anisimov)告訴 Agenstvo,俄羅斯警方能夠利用面部識別技術識別並追蹤葬禮上的人,"直到他們傢門口"。葬禮舉行前幾天,當局在教堂和墓地周圍安裝幾個新的監控攝像頭。俄羅斯是許多依靠面部識別技術

2023-01-23

。這些奇怪的圖案愚弄像YOLO的物體檢測算法,使其認為穿戴者的整個身體是一種動物,所以它們甚至不啟動找臉過程來嘗試匹配。Didero使用YOLO(You Only Look Once)測試這些設計,這是一個基於神經網絡的物體檢測系統,能夠對實