用皮膚“聽”音樂:戴上這款裝備聽音樂會 仿佛住在鋼琴裡


貝多芬失聰後繼續創作的故事相信大傢都聽過。《致愛麗絲》、《英雄交響曲》、《田園交響曲》等等作品都堪稱經典。那你有沒有想過,他究竟是如何做到的?初中物理課上,老師告訴我們:失去聽力的貝多芬,用牙咬住木棒一端,另一端頂在鋼琴上,以此感受鋼琴的震動,堅持創作。

而現在,科學傢的最新研究恰好也證實這一點:音樂不僅可以聽,還能摸!

甚至,聾人音樂傢們還能通過觸覺,理解音樂傳遞的復雜情感。


聽不見也能享受音樂

對於聽力正常的人來說,當特定頻率的振動(20Hz-20000Hz)通過空氣傳播,並被耳蝸中的微小感官細胞捕獲時,我們就能聽到聲音。

但其實,聲音也可以通過觸覺來感受。如果你去過狂熱的音樂會現場,就能感覺到:那些刺激的音樂不僅沖擊著你的耳膜,甚至能帶動你身體跟著搖擺。


沒錯,皮膚能直接感受到聲波產生的壓力,同時聲波也能通過吉他撥片、舞臺地板等中介,傳遞到人的手、腳、身體,甚至可以深入骨骼和內腔壁(如肺和胸部)之間的膜。

因此,有些聽障人士在聽音樂會時,會用手扣緊氣球表面,通過薄橡膠的震動更好地感受音樂。

多倫多城市大學心理學教授、音樂傢 Frank Russo 在研究中還發現:耳朵聽不到的人觸覺往往更敏感。

在聽障人士的大腦中,聽覺皮層經常以另外的方式被重新利用,它會重新連接來自其他感官的信號,比如觸覺和視覺。

尤其對於那些後天性耳聾的人來說,整個大腦會重新調整,以適應聽力損失。例如,一個涉及註意力的神經網絡被發現與協調運動反應、視覺系統和記憶力的神經網絡聯系更緊密。

而通過觸覺感受音樂的好處是,觸覺能有效地傳遞節奏。Russo 通過腦電圖的對比發現,無論是通過耳朵聽還是觸覺摸,兩者感受到的音樂節奏都是基本相同的。


不僅如此,觸摸還可以感受到音樂中的其他信息,比如可以通過振幅大小感受音量變化。

至於能否感受到音樂中的復雜情感,Russo 表示:絕大部分可以感受到。具體來說,低頻振動傳遞的情感更多,高頻振動則聽上去沒什麼情感。

來自馬拉加大學的 Byron Remache-Vinueza 形象地描述這一感覺:

把音樂從聲音切換到振動,就像把一道媽媽做的最好吃的菜換成湯,兩者隻是一種不同的體驗罷。

值得一提的是,截至目前,用觸覺感受音樂的方法已經改變很多聽障人士的生活。

改變人生的技術

利物浦大學的音樂振動項目 (Musical Vibrations) 是一個專門提供將音樂轉化為振動的設備的組織,該組織曾把他們的技術提供給聾啞說唱歌手 SignKid。

研究團隊將他的一首歌曲導入設備中,將吉他、踢踏鼓和小軍鼓的聲音轉換為振動,讓 SignKid 光腳踩在兩個振動器上,通過他的腳跟和前腳來感受音樂。


“我喜歡這個,”SignKid 告訴音樂振動團隊,“這真的能給我自信。”

最後,SignKid 用該團隊借給他的設備,制作他的個人 EP《視覺體驗》。

震動器還隻是簡單的操作,一傢醫療保健公司設計一款可穿戴設備 —— 把一系列傳感器綁在人的背部、肩膀、腰部、腳踝以及手腕處,外表看起來像安全帶和背包的組合,可以用於放大和傳輸不同頻率的振動。

這套裝備已經在拉斯維加斯市中心的一場音樂會上進行過測試,參加測試的聽障人士都表示,他們感覺身體變成樂器,音樂正在通過這些樂器被演奏出來。


▲ 來自 [email protected] Impossible

一位聽障人士在佩戴設備體驗貝多芬的《月光奏鳴曲》第三樂章後,說自己就像是“住在鋼琴裡”。

但是,盡管通過觸覺感受音樂已經得到驗證,在這個過程中還是遇到一些問題。

仍需改進

想要用觸覺感受音樂,遇到的第一個問題是:音樂的頻率和振動的頻率並不能完全對應。

相比於我們的耳朵對 2000Hz-5000Hz 的聲音最敏感,振動傳遞的聲音范圍卻通常在 5Hz-1000Hz 之間。

這意味著,許多耳朵能聽到的高音不能被觸覺捕捉到,或者說不能被精確地識別。相反,我們可以用觸覺感覺到某些低音,即使我們聽不到它們。

而將現有音樂轉換成振動的第二個障礙是如何區分不同的聲音。

南安普頓大學聲音與振動研究所的 Mark Fletcher 表示,目前的許多技術隻能處理已被劃分成不同樂器的獨立音軌的音樂,而很難很好地“分解”復雜音樂。

即使是最先進的算法,現在也難以解決更強烈的振動會掩蓋其他振動 ,以及不同的樂器在一首歌中音量會隨時變化等問題。

如果沒有強有力的方法將不同的樂器分開,並以振動的形式編譯出平衡的信號,將無法僅從振動中識別音樂的細微差別。

有一說一,盡管這些技術上的難題仍待解決,但這項技術的發明給聽障人士生活帶來的變化是實打實的。利物浦大學的研究團隊曾把他們的振動設備帶到一所聾啞學校。

老師們這樣回饋道:

學生們在音樂課上更投入,孩子們真的很喜歡,一個男孩總是在休息時間回來敲門問:“我可以再玩一次嗎?”

參考鏈接:

[1]https://nautil.us/how-the-brain-allows-the-deaf-to-feel-music-22197/

[2]https://direct.mit.edu/jocn/article-abstract/33/4/635/97411/Neural-and-Behavioral-Evidence-for-Vibrotactile?

[3]https://www.sohu.com/a/277841760_100163655

[4]https://www.musicalvibrations.com/signkid/

[5]https://www.researchgate.net/publication/348669717_Neural_and

[6]https://www.youtube.com/channel/UCeBCj0wtkliFdOqEN4jC_4Q


相關推薦

2022-10-23

海外玩傢發現《原神》的線上音樂會上有一位演奏傢的電子琴並未接上電源線和音頻線,遂質疑《原神》音樂會有假演奏的嫌疑。這一事情引發網友熱議,有人覺得《原神》音樂會不是現場演奏給人一種不實在的感覺,也有人覺

2022-08-08

化Winamp的操作界面外,還附帶許多實用插件,還帶有幾款皮膚功能,其中的佼佼者莫屬水手漢化系列,還記得這款木質皮膚麼。圖8 水手漢化加強版接下來就出現Winamp的歌詞插件,它們通過讀取相應歌曲的歌詞文件(你還記得lrc

2024-08-29

技8月28日消息,據媒體報道,《黑神話:悟空》線下主題音樂會今日在貓眼平臺正式開票,開票後2分鐘就已售罄。目前,《黑神話:悟空》線下音樂會門票在二手交易平臺上已翻倍,原價880元的門票掛出1800元的價格,也有賣傢

2023-07-05

欣賞會發光的海底生物。可以帶著手機,欣賞自己喜歡的音樂,艙內還有藍牙揚聲器可以播放。當天,克裡斯汀和女兒親眼看著5人進入泰坦號”,還心想:這個是美好的早晨。”結果僅僅1小時45分鐘後,天人永隔。

2022-07-26

樂器,通過用槌子敲擊鼓的凸腹上不同大小的凹痕來產生音樂。鋼鼓被廣泛認為是20世紀發明的唯一主要樂器,1930年代起源於加勒比海島國特立尼達和多巴哥,但其歷史可以追溯到1700年代被帶到加勒比海的受奴役黑人。由特立

2022-07-16

等一眾新歌歌名,也在霸榜。甚至連周傑倫網卡以及在線音樂播放器QQ音樂、AppleMusic都成為熱詞。根據網友的統計,上線不到兩個小時,周傑倫新專輯銷售總額就已經破億。類似的盛況一周前也出現過,在先行曲MV官宣當日,據

2022-09-23

幀。至於音頻方面,雖然表現依然非常不錯,尤其適合聽音樂和看電影,但相比前代隻是略有進步,畢竟上一代就很強。在錄制方面,iPhone 14 Pro Max 非常適合錄制視頻和自拍視頻,對於音樂會等非常響亮的內容也有不錯的錄制表

2023-09-26

9月25日消息,據媒體報道,不少網友爆料稱,在某短視頻平臺團購名為《大唐樂宴》的演出門票,到現場後發現,宣傳照片和視頻系盜用另一場名為《唐宮樂宴》的演出的素材,實際演出與宣傳內容嚴重不符。現場佈景和主持人

2023-04-25

隻貓,愜意地搖著尾巴。背景裡,放著一些聽著很輕松的音樂。以上,是YouTube裡一個頻道的直播畫面。一般來說,這個頻道 24 小時在線,永遠放著音樂,女孩也永遠在學習。你可能無法相信,這樣一個簡單的直播間,在全球有

2023-04-03

據日媒報道,日本著名音樂傢坂本龍一已於3月28日不幸去世,享年71歲。坂本龍一2014年罹患口咽癌,2021年初又接受直腸癌手術,但癌細胞又擴散到雙肺,同年10月和12月又做兩次手術。2022年6月,坂本龍一透露自己的癌癥已經到

2022-10-15

聲廣播的肇事者更有可能進行視頻通話,而不是聽糟糕的音樂。大約 36% 的受訪者在手機上聽音樂,而 45% 的受訪者表示他們會進行視頻通話,46% 的受訪者表示他們會觀看視頻。

2022-10-19

日本音樂設備巨頭羅蘭(Roland)公司今年慶祝成立50周年,並將木材的紋理之美與最先進的數字技術相結合,推出其最新的作品--50周年概念模型鋼琴。羅蘭公司於1972年在日本大阪成立,當時主要設計制造電子鼓以及電子鋼琴等

2023-01-20

的一個有趣之處在於其空間意識。當用一對HomePod 2設備聽音樂時,可以註意到聲音似乎並不直接來自HomePods。一些聲音來自左邊,另一些來自右邊,還有一些(通常,但不總是,特別是播放人聲的時候)來自正中。然而,最有趣

2023-06-27

6月25日消息,年度音樂盛會波納羅音樂節(Bonnaroo)於今年6月在美國田納西州曼徹斯特舉行,吸引超過8萬人參加。然而,今年的音樂節上,救援人員卻遇到一個麻煩:收到的911誤報數量是幾年前的5倍。分析原因發現,這與iPhone