我的聲音屬於每個人:數位雙胞胎Holly+

(圖源:©Andrés Mañón)

Holly Herndon長期投入研究機器學習和聲音之間的相互作用,以及這項技術對智慧財產權和聲音主權的影響。她的最新項目不是一張專輯,而是對整個音樂影響更深遠的項目 《Holly+》。它是 Holly Herndon Deep fake (註1) AI 數位雙胞胎,允許大眾免費使用Herndon聲音作為創作元素的工具,而Herndon將通過Holly DAO分配她的數位肖像權。

“Technology will change things, but I refuse to become cynical, and I refuse to give up my agency in this process. I’m not scared; I’m excited about what this new technology could unlock.” – Holly Herndon

(Holly+平台邀請大家上傳自己的內容體驗)

Holly+為Holly Herndon與她的搭檔 Matt Dryhurst 以及 Never Before Heard Sounds 共同合作開發的「語音樂器」。
任何人都能瀏覽介面並上傳任何聲音內容,透過 Herndon 的語音模型(註2)保留了用戶上傳內容的音高和節奏,但添加了從訓練集中學習的紋理和音色轉換為新的聲音。上傳音檔長度限制最多為5分鐘,將不會保留任何原始音檔內容。

[操作流程]
Step1:點入Holly+平台
Step2:上傳音檔內容   溫馨提醒:在操作過程中發現不支援m4a格式,顯示error
Step3:透過Holly+轉換後的音檔,除了可以下載外也提供可以分享的網頁版
透過小編試玩的網頁版大家聽得出來Holly+說了什麼嗎?   解答點我揭曉

公開發布自己的聲音後,Herndon強調這些技術仍帶來的挑戰,同時關注如何保護創作者免受剝削的解決方案。她在 Holly+ 發表的一份聲明中提到「需要在保護藝術家和鼓勵人們嘗試新的令人興奮的技術之間找到平衡。」

 

Holly+ DAO 中融合機器學習和WEB3.0

Holly+ 的核心使命是使用新興技術的組合來使創新實現去中心化。
Holly Herndon其中一張專輯名稱為《Platform》。取名為平台原由是Herndon對於創造工作平台資本主義的批判。她認為許多人透過主流社群媒體為平台公司工作,並沒有真正從中獲得任何好處。而WEB3世界去中心化系統中有趣的交流互動以及應用吸引了她,同時,一直嘗試自己聲音和形象的Herndon對於智慧財產權的想法發生轉變。
最初由加密貨幣推廣的協議現在正被創意人員用來保存和追蹤其智慧財產權的數位證書,Holly+為開源模式,雖然每個人都可以任意使用,但Herndon仍保留了聲音模型的權利。為此,Holly+將來發展不可能在WEB2.0上,WEB3.0能透過驗證使用者開放身份並追溯原始來源。

(圖源:https://auction.holly.plus/)

萬一我身故,我覺得以去中心化的所有權方式來處理我的聲音模型會更好。讓一個由維護我的聲音價值和聲譽的人組成的DAO 來管理我的聲音模型,而不是讓不太熟悉與我的工作有關的價值和標準的人來進行。我希望在DAO 中去中心化的決策能夠通過辯論和共同利益來鼓勵對這些權利進行更細緻的管理” – Holly Herndon

Holly+ 目前由一個去中心化的自治組織或 DAO(註3) 監督,其目標除了對人類聲音的機器學習特徵進行實驗,為技術帶來的倫理問題找到解決方案之外也期望讓使用合成語音技術的社區來控制其作品所構成的生態系統。
DAO的民主投票制,將Holly Herndon聲音的官方使用授權給經過批准的藝術家,意味著每個創作都可以透過數據保障智慧財產權。Herndon Dryhurst 還推出了一個數字拍賣行,藝術家可以上傳和出售以她的肖像創作的作品。然後將收益用於開發新工具,藝術家可以使用這些工具來創作和銷售更多作品——這就是她最大的願景:讓個人創造力有助於全體福利的良性循環。

 

Holly Herdon於9月展示舞台,邀請歌手同時用不同麥克風(其中一隻是Holly聲音)進行演唱(來源:Youtube/TED)

 

註1:Deepfake是對一個人的人工複製。為了創建一個深度偽造,工程師將他們想要複製對象的大量資訊材料輸入複雜的程式中。
註2:語音模型是一種深度神經網絡,可以生成單個語音的原始音頻。透過錄製語音和目標語音的歌聲上進行訓練,並且能通過各種方式進行互動,從文本到語音應用程式到更複雜的互動,例如音樂風格轉換,其中來自一個聲音的音色可以轉換為類似目標聲音。
註3:DAO 為Decentralized autonomous organization縮寫,去中心化自治組織,決策以由下而上運作。

參考資料:
Mirror/ Holly Herndon 
The Fader|Holly Herndon on the power of machine learning and developing her “digital twin” Holly+
Document|Who does your voice belong to? For musician Holly Herndon, the answer is ‘everyone’
ARS ELECTRONICA|Holly+: Come and sing like Holly Herndon!

(相關閱讀:生下AI嬰兒的聲音藝術家- Holly Herndon藝術登陸Web 3.0Web3.0 聲音迭代實驗室

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *

相關文章

《潮濕的共鳴》紀柏豪個展

《潮濕的共鳴》源自藝術家在汐止的生活經驗,通過與在地社群密切合作,走訪河畔、湖泊及各種治水設施,尋訪水的痕跡。汐止舊名「水返腳(Tsui-Tng-Ka)」,因基隆河漲潮到此又折返而得名。展覽以汐止的水文環境及歷史為背景,探討人們如何對周遭的水—河流、雨水、濕氣—進行控制,而這樣的控制又如何具體而微地體現在日常生活中。

閱讀全文 »

聲化感官實驗室 Sonic Sensory Lab
2023 展覽回顧

在2023年,聲化感官實驗室以創新與多元的藝術探索,為大家展示了一個跨越聲音、自然、科技和社會的奇妙世界。從汐止水岸的聲音探索,到台灣及墨西哥間的環境對話,再從地球共振與保護性噪音的創意抵抗到探索太空時代的未來飲食,最後回看世界各地的城市聲響,每一部作品都是一次感官的旅程,透過視覺與聽覺的雙重刺激,挑戰我們對周遭世界的認知,並引發對更大宇宙意義的探索。

閱讀全文 »
Scroll to Top