
【創意科技】使用網頁來讀取手機的麥克風聲音
前陣子在兩廳院駐館的呈現中,我們嘗試使用網頁讀入環境的聲音,做為控制、觸發作品走向的條件。今天就來分享從網頁使用 Javascript 讀取麥克風聲音的簡單概念吧!

前陣子在兩廳院駐館的呈現中,我們嘗試使用網頁讀入環境的聲音,做為控制、觸發作品走向的條件。今天就來分享從網頁使用 Javascript 讀取麥克風聲音的簡單概念吧!



大家可能有在手機上玩過一些小遊戲APP,會讓玩家透過人聲來控制角色的移動。如果想要在個人電腦上達成這樣的應用,又不想要寫太多Code,我們應該怎麼透過數位工具與Creative Coding來實現呢?

Samson Young製作了一個影片和一個十二聲道裝置,作為《Muted Situations》系列作品的一部分,這個系列作品突顯了某些在日常聲音體驗中被我們忽略的時刻。透過有意識地「靜音」聲音的表層,揭示了平常較不容易注意到的聲音。Young寫了一系列簡短的教學文本,描述了他已經展演過的一些假設情境,以讓那些不容易被注意的聲音重新引人傾聽。

顆粒合成(Granular Synthesis)是數位音訊發展中,一個相當有趣且具有特色的聲音合成技術。簡而言之,這種合成法是把一小段聲音,想像為一個整體,將其切碎成許多細小的顆粒(Grain),並透過不同音訊調變手法去處理,例如快轉、回放、停留在某一處等等。這類帶有特殊質地(Texture)的聲響,目前也被大量應用於數位音樂、電子音樂及實驗聲音創作中。

有時候在網路上或現場表演中,看到別人能用嘴巴製造出許多不同音色,是不是會有點羨慕呢?沒關係,現在透過數位工具跟Creative Coding,我們也能稍稍體會一下用「人聲」來演奏的樂趣!

資訊聲音化(Sonification)是能讓人用聽覺來理解周遭不可見事件與狀態的一個詩意手法。這次要跟大家分享一個「把天氣資訊轉換成聲音」,像是在聆聽周遭環境變化一般的Max實作練習。完成的Max Patch程式截圖如下圖,包含了會自動顯示的位置、溫度、風速與天氣類型的Message。

將捕捉到的及時影像做分格處理,藉由偵測到不同區塊的影像變化來觸發音效。其中影像分格的方式也模擬了大家彈奏豎琴時利用兩隻手撥弦的動作,演奏起來真的就像在空氣中撥弄豎琴的樣子。

人類的聽覺被限制在20Hz到20kHz之間的一個狹窄的頻率範圍,耳朵雖然無法聽到超過這個範圍的聲音,但卻可以通過身體其他感官察覺。在這個宇宙中,無限的物體每時每刻都在我們周圍產生超聲波和次聲波。這不光是許多古老詩歌靈感的來源,並自從第一次世界大戰以來,它就被用作武器和監視的潛在物質資源。那麼,這個「聽不見的世界」到底是什麼樣的呢?