IMPERCEPTIBLE——用實驗聲響解構短影音

在資訊爆炸的時代，社交媒體的碎片化內容成為日常生活一部分，這些數位世界中的「星塵」不斷擴散，影響著我們對世界的感知《IMPERCEPTIBLE》是一個臺灣創作者陳瑋璿（Lena Chen）在荷蘭 ArtEZ 學院聲音創新學程所發展的項目，經由融聲創意「聲化感官實驗室」平台支持，藝術家紀柏豪與Lena定期討論以修正創作方向及技術框架，完成了一個即時影音調變的演出系統《IMPERCEPTIBLE》。此作品於概念上反映了馬歇爾・麥克魯漢「媒體即訊息」的理論觀點，而且在現場表演中，通過將社交媒體內容轉化為音視頻藝術來探索數位媒體對現代生活的影響。

創作介紹

《IMPERCEPTIBLE》是一項挑戰傳統感官體驗的藝術創作，透過將社交媒體的短影音內容轉化為聲音和視覺藝術，重新界定了我們與數位內容的互動方式。這項目特別選擇了來自Snapchat Spotlight的短影片作為主要素材，這些影片本身就是當代數位文化的快照，捕捉了流行趨勢、日常生活片段以及用戶自我表達的瞬間。Lena 通過她的藝術實踐，對這些看似短暫且易逝的數位片段進行了深度挖掘和創新性的轉譯。

在這項目中，短影音內容被解構成一系列音視頻元素，這些元素被重新編排和轉化，以探索和表達社交媒體在當代文化中的作用和影響。這種轉化過程不僅是對原始素材的再創作，也是對日常經驗的重新解釋，反映了我們如何在資訊爆炸的時代中尋找意義和聯繫。

「媒體即訊息（The medium is the message）」—— 馬歇爾・麥克魯漢（Marshall McLuhan）

媒介理論大師馬歇爾·麥克盧漢提出的經典觀點——「媒介即訊息」，認為媒體本身不僅是信息傳播的載體，更是塑造社會認知和感知環境的力量。在他的著作《Understanding Media: The Extensions of Man》中，麥克盧漢強調了媒體如何作為人的延伸，深刻影響著我們的生活方式和思維模式。儘管媒體的內容很容易被察覺，但它背後所引起的環境和文化變革則常常被忽視。 這正是《IMPERCEPTIBLE》項目試圖展開的討論。在這個由算法精心編織的社交媒體世界中，資訊不斷被重新處理和轉換。如同麥克盧漢所言，每當一種新的媒介技術出現，它就會創造出一個新的環境，並將舊環境的內容重新配置，就像電視對電影內容的重新處理一樣。這一轉換過程往往是不易被感知的，這也正是這個項目名稱「IMPERCEPTIBLE」的由來。

這一理論尤其在當代視聽媒體的背景下顯得極為重要。隨著新媒體技術的發展，新的媒體環境不斷出現，而這些新環境會將舊環境的內容進行重新處理和轉化。麥克魯漢認為，每種新技術都創造了一個新的環境，這個新環境會將其前身轉化為一種藝術形式，從而改變了我們對信息的感知和處理方式。從馬歇爾·麥克盧漢的《Understanding Media: The Extensions of Man》到AI生成藝術，再到《The Social Dilemma》這部紀錄片，各種靈感源泉共同編織出這個項目的理念基礎。

因此，此專案試圖延伸麥克魯漢關於訊息內容在新舊媒體間轉換的觀察，去解答以下問題：

藝術家可以如何見證資訊在不同媒介間傳遞轉換的現場？如果社群媒體的內容被轉化到新媒體會創造出什麼樣的環境？

為了回答這些問題，Lena 的視線落到了滲透日常生活的短影音內容，她將收集而來的短片進行解構，並通過聲音藝術的現場表演重新詮釋它們。以下進一步解釋了條件和定義：

• 解構：就像是將紙張放入碎紙機後重組這些碎屑，紙張所攜帶的訊息將變得不連續，這些碎屑也可能被用於與原本還是紙張時無關的目的，例如包裝填充物。在數位的世界中，由於壓縮和解壓縮過程，訊息和數據的傳輸經常會降解或重新採樣，然後訊息會因不同創作者而成為新內容。
• 材料：短片來源於 Snapchat Spotlight 的推播，且未有特定的標籤或主題。選擇 Snapchat 不僅是因為這是最受歡迎的平台之一，且希望能避免素材可能在不同平台的差異。另一方面，由於可能存在隱私安全問題並沒有選擇 TikTok。
• 演算法：本專案不探討不同平台演算法的運作，將著重於社交媒體瀏覽的行為習慣以及訊息的攜帶和轉化。因此，材料是 Wei Hsuan Che 在偶然的時刻瀏覽 Snapchat Spotlight 的紀錄，撇除了時間、主題以及帳號歸屬的因素。

從短影音提取參數，轉化為視覺動態

《IMPERCEPTIBLE》展示了對現代數位工具和社交媒體內容的創新性運用，特別是將Snapchat Spotlight的短影音內容轉化為藝術表現的核心。在這個過程中，Lena 從這些短片中提取視覺和聲音元素，包括顏色、動態和像素等數據，並將它們轉化為音樂和視覺藝術的參數。例如，影像中的特定顏色值被用來生成聲波或改變音色，進而影響音高和節奏等音樂元素。這種方法不僅展現了對數位媒體的技術掌握，也體現了將日常的社交媒體內容轉化為多感官體驗的創新探索。

技術上，使用Max/MSP、VCV Rack虛擬模組合成器和Arturia Beat Step Pro控制器，這些工具允許實時操作和表達轉化後的數據。Lena 通過這些平台對聲音進行反轉、減速和顆粒合成等處理，同時將數據轉化為視覺效果，如降解、顆粒化和鏡像效果，創造出能與音頻連動的影像。整體而言，這項目的技術架構不僅提升了藝術表達的深度，也顯示了社交媒體內容在新媒體藝術領域中的應用潛力。以下為Demo影片。

本項目由荷蘭 ArtEZ 學院及國藝會補助