即時交通攝影機輸入
使用 Studio City 的公開 Caltrans 攝影機所拍攝的五條 US-101 車道畫面,作為音樂演出的來源。
The 101 Plays Itself 是一項以瀏覽器為基礎的影音音樂實驗,素材來自 Studio City 的 US-101 公開 Caltrans 交通攝影機。它觀察高速公路上的五條即時車道,將車輛移動轉化為合成音符,因此不斷變化的道路活動本身成為素材,而非預先編寫的樂譜。
系統在道路上覆蓋車道形狀的取樣區塊,偵測並追蹤通過的車輛,並在瀏覽器本機產生聲音。車道位置設定音高;車種選擇音色;速度控制音符持續的時間;車輛大小影響音量;變換車道會使音高彎曲;車輛在道路上的位置則決定立體聲定位。即時攝影機離線時,也提供錄製版本。
使用 Studio City 的公開 Caltrans 攝影機所拍攝的五條 US-101 車道畫面,作為音樂演出的來源。
每秒讀取十五次、對應各車道的十個取樣區塊,並偵測車輛何時穿越監測線。
將車道、車種、速度、大小、變換車道及道路位置,分別映射至音高、音色、音符長度、音量、音高彎曲及立體聲定位。
追蹤車輛通過攝影機畫面的過程,並將卡車與公車和其他車輛區分開來,以採用不同的聲音處理方式。
使用 Web Audio API 在瀏覽器中合成聲音,而不是使用取樣、迴圈或預先錄製的音訊。
提供兩種可同時播放的樂器,配有可選擇的樂器音色板,並支援最多 16 個同時發聲的聲部。
聆聽不斷變化的高速公路活動,感受其節奏與音高從道路上的車輛中自然產生的環境式資料驅動演出。
將此專案作為具體範例,了解電腦視覺如何把移動、分類與空間資料轉譯成聲音。
探索車道位置、速度、車種與攝影機視角如何即時影響影音系統的輸出。
當即時攝影機無法使用,或偏好一致的聆聽體驗時,使用中午錄製的版本。
The 101 Plays Itself 使用 Studio City 的 US-101 公開 Caltrans 交通攝影機。瀏覽器會分析攝影機畫面,並根據偵測到的車輛移動產生聲音。
在即時模式中,車輛穿越不可見的取樣線時會觸發音符。車道位置決定音高,車種會改變音色,速度影響音符持續時間,車輛大小影響音量,變換車道會使音高彎曲,而車輛在道路上的位置則控制立體聲定位。
可以。攝影機無法使用時,網站會提供同一條高速公路的三分鐘錄製版本。錄製頁面說明這是一段 2 分 45 秒的中午錄影,影片播放時由瀏覽器合成音訊。
頁面表示,偵測與合成完全在瀏覽器中執行,使用瀏覽器音訊。頁面指出合成採用 Web Audio API,產生的聲音不使用取樣、迴圈或預先錄製的片段。
此頁面設計為在瀏覽器中聆聽。它提供兩種可同時播放的樂器、可選擇的樂器音色板,以及最多 16 個聲部;但來源未具體說明完整的瀏覽器或裝置相容性清單。
AI Song Maker 是一款網頁版 AI 音樂生成器,可將文字或歌詞快速生成歌曲,並提供人聲移除、音軌延長與段落替換等音樂編輯工具。
LALAL.AI 是 AI 音訊處理平台,提供人聲與伴奏分離、語音清理與變聲功能,支援音訊與影片檔案的瀏覽器上傳、預覽與下載,並提供進階與企業方案。
Kits AI 是一個 AI 音樂製作平台,提供聲音克隆、歌聲生成與人聲處理工具,另有免費方案、付費方案與 Windows 桌面應用程式,適合創作者與製作人打造工作流程。
ElevenMusic 是一個以網頁為基礎的音樂平台,可探索曲目、混音音樂並創作原創歌曲,支援依提示與情緒標籤生成,且可儲存收藏、生成內容與播放清單。
Hedra 是一個 AI 創意平台,協助規劃與製作影片、圖片和音訊內容,支援代理式工作流程、品牌元素重用與內容生產擴展。
MusiKey 是一款跨平台桌面應用程式,它使用加密的音樂作品取代傳統密碼,以實現安全身份驗證。