台灣互動體驗設計協會專欄

【互動體驗觀察】誰來開展EP01—《聲之書:彼得與狼》

透過聲音打造擬真場域的技術大揭密

阿亂和主持人巧三介紹《聲之書:彼得與狼》的製作技術

誰來開展第一集有幸邀請到臺灣聲響實驗室的阿亂,來和我們介紹由他執導的年度鉅作—《聲之書:彼得與狼》的特點,以及這個節目如何透過這些聲音技術達到更全面性的擬真效果。

看完影片讓我們一起來認識一下片中所提到的聲音技術吧!

沉浸式3D聲響 (VR聲響) 的製作

坊間的3D聲響的組成主要分為兩種收音、聲音定位方式,搭配不同的音響呈現方式。

1. Scene-based 場景導向式

這種聲音技術透過特殊的收音裝置,由收音裝置為中央,將整個場域的聲音收錄下來;這種技術不會紀錄個別聲音方向性的分別,所以無論聲音從那方面以來,都會清晰地記錄在錄音中。場景導向式聲音一般使用的是Ambisonics系統技術,一種用來還原收音聲場效果的環繞聲系統技術。

Ambisonics系統使用多個音響重現場景導向式收音的場域音效

場景導向式聲音最大的優勢就是不需要複雜的系統處理後製,而且可以輕易地匯出成不同播音方式適用的格式,例如Ambisonics播放系統、支援立體聲的耳機、Youtube全景影像的聲音格式等等。

常見的ambisonics收音麥克風

第一款ambisonic 麥克風是由聲音音響公司—SoundField所發明。內涵4個面相4面的內置話筒(capsule),以由場域中央錄製周圍 360 度的聲音資訊。

然而,場景導向式聲音技術會遇到的挑戰就是,由於是全景是收音,比起XLR槍型指向麥克風來說,音壓的收音範圍較小,收音環境有其侷限。

2. Object-based 物件導向式

使用軟體將個別音源布置在模擬的360度空間中

這種聲音技術是將場域中的聲音個別收錄,再透過特殊的程式將這些個別的聲源重組、產生方位感並模擬成360度的聲音。電影院常標榜的杜比全景式聲Dolby Atmos音響系統使用的就是這樣的聲音技術,讓觀眾可以清楚感受到子彈從身後往前飛,或是上方直升機的超高清音效,彷彿這些物件就在身邊。

電影院常標榜的杜比全景式聲
物件導向式聲音一般使用槍型指向麥克風收音

物件導向式聲音一般使用收音範圍窄但是方向性強的槍型指向麥克風收音。收音的最佳角度僅限於麥克風正前方的小範圍,但也因為如此,能收錄高清晰度的音檔。

由於是將一個個音檔收錄好後在來重新安排他在空間中的位置,物件導向式聲音技術的定位效果相較於場景導向式聲音技術來得好,也適合用於製作虛擬場域的音效。不過也因為相同的原因,導致檔案太大集製作成本高的問題,或是聲音過於清晰、集中容易顯得不自然。

臺灣聲響實驗室的獨門作法

對於這兩項聲音技術的優缺點,物件導向式聲音技術清楚的音源以及方向性但是缺少的真實感以及場景導向式聲音技術能達到的臨場感卻讓聲音不夠清晰,臺灣聲響實驗室選擇了將兩種技術融合,以達到最好的聽覺體驗!他們採用Object-based技術收音、製作聲音,並使用和Ircam技術對接的spat軟體將聲音還原回類似Scene-based的環繞式聲音。最後利用Ambisonic播放系統創造出了佈滿49.4顆喇叭的大洞和16.1顆喇叭的小洞,這兩個能夠符合不同展演聲音需求的表演場域。

這兩項聲音技術各有優缺點,物件導向式聲音技術有清楚的音源以及方向性,但是聲音來源集中、缺少的真實感;場景導向式聲音技術的音質較真實,能夠達到具臨場感的聆聽效果,但理想的播放系統需要多組喇叭與精確地設置位置。臺灣聲響實驗室選擇了將兩種技術融合,以達到最好的聽覺體驗!他們採用Ambisonics的收音技術、製作聲音,並使用和Ircam技術對接的Spat軟體將聲音還原回環繞式的聲響,並規劃兩組能夠呈現具現場感的播放系統——佈滿49.4顆喇叭的大Dome和16.1顆喇叭的小Dome,創造出兩個能夠符合不同展演聲音需求的表演場域。

佈滿16.1顆喇叭,聲音更貼近體驗民眾的小洞
佈滿49.4顆喇叭,更能模擬出實際場景的大洞

臺灣聲響實驗室將在今年的桃園藝術節再次展出《聲之書:彼得與狼》》,歡迎大家親自來體驗VR聲響帶來的身歷其境感。也讓我們期待臺灣聲響實驗室做出更多VR聲響的精彩作品!

參考資料:

https://musictech.tw/history-of-stereo-961d54426b14

https://www.cnet.com/news/dolby-atmos-why-its-cool-how-it-works-and-how-to-get-it/

圖片來源:臺灣聲響實驗室、BBC Research & Development、Core Sound臉書、Steinberg網站

更多互動體驗設計相關的活動、資訊請上:https://tieda-ixd.com/
更多科學與科技新聞都可以直接上 明日科學網站 www.tomorrowsci.com