The 101 Plays Itself icon

The 101 Plays Itself

The 101 Plays Itself 將美國 Studio City 的 US-101 公開 Caltrans 交通攝影機即時車流,轉化為瀏覽器合成音樂,讓車道、車種、速度與位置映射成聲音。適合關注資料聲化、電腦視覺及互動媒體的聽眾與創意科技研究者。

The 101 Plays Itself

將交通攝影機轉化為瀏覽器樂器

The 101 Plays Itself 是一項以瀏覽器為基礎的影音音樂實驗,素材來自 Studio City 的 US-101 公開 Caltrans 交通攝影機。它觀察高速公路上的五條即時車道,將車輛移動轉化為合成音符,因此不斷變化的道路活動本身成為素材,而非預先編寫的樂譜。

系統在道路上覆蓋車道形狀的取樣區塊,偵測並追蹤通過的車輛,並在瀏覽器本機產生聲音。車道位置設定音高;車種選擇音色;速度控制音符持續的時間;車輛大小影響音量;變換車道會使音高彎曲;車輛在道路上的位置則決定立體聲定位。即時攝影機離線時,也提供錄製版本。

功能

即時交通攝影機輸入

使用 Studio City 的公開 Caltrans 攝影機所拍攝的五條 US-101 車道畫面,作為音樂演出的來源。

以瀏覽器為基礎的車輛偵測

每秒讀取十五次、對應各車道的十個取樣區塊,並偵測車輛何時穿越監測線。

車流至聲音的映射

將車道、車種、速度、大小、變換車道及道路位置,分別映射至音高、音色、音符長度、音量、音高彎曲及立體聲定位。

車輛追蹤與音色

追蹤車輛通過攝影機畫面的過程,並將卡車與公車和其他車輛區分開來,以採用不同的聲音處理方式。

即時音訊合成

使用 Web Audio API 在瀏覽器中合成聲音,而不是使用取樣、迴圈或預先錄製的音訊。

樂器控制

提供兩種可同時播放的樂器,配有可選擇的樂器音色板,並支援最多 16 個同時發聲的聲部。

使用情境

  • 環境式聆聽

    聆聽不斷變化的高速公路活動,感受其節奏與音高從道路上的車輛中自然產生的環境式資料驅動演出。

  • 創意科技參考

    將此專案作為具體範例,了解電腦視覺如何把移動、分類與空間資料轉譯成聲音。

  • 互動式資料聲化研究

    探索車道位置、速度、車種與攝影機視角如何即時影響影音系統的輸出。

  • 錄製內容播放

    當即時攝影機無法使用,或偏好一致的聆聽體驗時,使用中午錄製的版本。

Pros and Cons

Pros

  • 將即時公共車流轉化為音樂,不需要傳統的音樂來源。
  • 透過可觀察的交通變數說明聲音,而不是依賴未公開的作曲規則。
  • 在瀏覽器中完成偵測、追蹤與合成,即時產生時不使用取樣、迴圈或錄音。
  • 包含錄製備用模式,並讓聽眾在車流播放期間變更樂器。

Cons

  • 即時體驗取決於公開 Caltrans 攝影機及網路連線是否可用。
  • 來源未提供完整的瀏覽器、裝置或無障礙相容性規格。
  • 錄製模式是固定錄製內容,而不是互動式重播使用者自己交通場景的版本。

FAQ

The 101 Plays Itself 是什麼?

The 101 Plays Itself 使用 Studio City 的 US-101 公開 Caltrans 交通攝影機。瀏覽器會分析攝影機畫面,並根據偵測到的車輛移動產生聲音。

車流如何變成音樂?

在即時模式中,車輛穿越不可見的取樣線時會觸發音符。車道位置決定音高,車種會改變音色,速度影響音符持續時間,車輛大小影響音量,變換車道會使音高彎曲,而車輛在道路上的位置則控制立體聲定位。

即時攝影機離線時還能使用嗎?

可以。攝影機無法使用時,網站會提供同一條高速公路的三分鐘錄製版本。錄製頁面說明這是一段 2 分 45 秒的中午錄影,影片播放時由瀏覽器合成音訊。

音訊在哪裡產生?

頁面表示,偵測與合成完全在瀏覽器中執行,使用瀏覽器音訊。頁面指出合成採用 Web Audio API,產生的聲音不使用取樣、迴圈或預先錄製的片段。

有哪些控制功能?

此頁面設計為在瀏覽器中聆聽。它提供兩種可同時播放的樂器、可選擇的樂器音色板,以及最多 16 個聲部;但來源未具體說明完整的瀏覽器或裝置相容性清單。

Quick Facts

類別
以瀏覽器為基礎的影音音樂實驗
交通來源
公開 Caltrans 攝影機,Studio City 的 US-101
即時涵蓋範圍
五條車道
音訊技術
在瀏覽器中使用 Web Audio API 合成
偵測與追蹤
YOLO11 與 ByteTrack
錄製模式
中午錄影;約三分鐘