「看嘴型,聽不同音?」究竟視覺如何影響聽覺 揭秘「McGurk效應」
醫學健典

「看嘴型,聽不同音?」究竟視覺如何影響聽覺 揭秘「McGurk效應」

當我們的視覺和聽覺發生矛盾時,會發生什麼事?答案是:你的大腦會做出驚人的選擇!這就是被稱為“McGurk效應”的現象。這個效應最初由蘇格蘭心理學家Harry McGurk在1976年描述,他發現當視覺信息(例如人的口型)與聽覺信息不符時,我們的大腦會選擇信任視覺信息。

不信?現在就上YouTube搜索「McGurk效應」。你會看到一段影片,裡面的人不斷地重複說「ba」。但當他改變口型時,你的耳朵會「聽到」不同的音節,雖然真正的聲音從未改變。

視覺影響聽覺 適應非失調

描述所測量的大腦體積(在框中,圖/Frontiers in Human Neuroscience)

那麼,為什麼我們的大腦會這樣做呢?賓州大學的神經外科教授麥可(Michael Beauchamp)花了大部分的職業生涯研究McGurk效應。他認為答案可能與我們大腦的一個特殊部位有關,那就是左側優越時顳溝(STS)。這個部位是視覺和聽覺中心之間的橋樑,當兩種感官信息矛盾時,它會幫助大腦做出判斷。

關於腦的特殊部分如何工作。 (A) 這張圖展示了腦中特定區域的活動。L代表左邊。粉紅色的部分表示兩種不同的活動在同一地方發生。 (B) 這是一個顯示時間與腦活動的圖表。對於那些看到McGurk效應(一種視聽幻覺)的7個人,和那些沒看到的5個人,他們的腦活動是如何變化的。RH和LH分別代表右腦和左腦。(圖/Frontiers in Human Neuroscience)

但這還不是結束!一些人總是受到McGurk效應的影響,而另一些人從未受過。這說明了視覺和聽覺在多感官處理中的互動比許多科學家早期認為的要複雜和微妙得多。這也意味著,有時,容易受到幻覺的影響可能是一種「適應性反應」,而不是失調。

而更進一步的研究甚至提出,受到McGurk效應的影響可能不僅僅是大腦的「錯誤」,而是一種適應性反應。畢竟,在某些情境下,依賴視覺信息可能更有利於我們的生存和適應。驚人的是,McGurk效應可能是永久的!如果你長時間觀看同一個McGurk效應的視頻,即使你不看屏幕,你仍然會受到幻覺的影響,因為你的大腦已經被重新連接了。

說到這邊,可能還是有些讀者不相信這個現象!那麼,你準備好接受挑戰了嗎?快去YouTube體驗一下McGurk效應吧!

更多科學與科技新聞都可以直接上 明日科學網 http://www.tomorrowsci.com


參考論文:

1.Examining the McGurk illusion using high-field 7 Tesla functional MRI.Frontiers in Human Neuroscience

延伸閱讀:

1.【數位五感】看見生物眼中的另一個世界