我的聲音屬於每個人:數位雙胞胎Holly+

(圖源:©Andrés Mañón)

Holly Herndon長期投入研究機器學習和聲音之間的相互作用,以及這項技術對智慧財產權和聲音主權的影響。她的最新項目不是一張專輯,而是對整個音樂影響更深遠的項目 《Holly+》。它是 Holly Herndon Deep fake (註1) AI 數位雙胞胎,允許大眾免費使用Herndon聲音作為創作元素的工具,而Herndon將通過Holly DAO分配她的數位肖像權。

“Technology will change things, but I refuse to become cynical, and I refuse to give up my agency in this process. I’m not scared; I’m excited about what this new technology could unlock.” – Holly Herndon

(Holly+平台邀請大家上傳自己的內容體驗)

Holly+為Holly Herndon與她的搭檔 Matt Dryhurst 以及 Never Before Heard Sounds 共同合作開發的「語音樂器」。
任何人都能瀏覽介面並上傳任何聲音內容,透過 Herndon 的語音模型(註2)保留了用戶上傳內容的音高和節奏,但添加了從訓練集中學習的紋理和音色轉換為新的聲音。上傳音檔長度限制最多為5分鐘,將不會保留任何原始音檔內容。

[操作流程]
Step1:點入Holly+平台
Step2:上傳音檔內容   溫馨提醒:在操作過程中發現不支援m4a格式,顯示error
Step3:透過Holly+轉換後的音檔,除了可以下載外也提供可以分享的網頁版
透過小編試玩的網頁版大家聽得出來Holly+說了什麼嗎?   解答點我揭曉

公開發布自己的聲音後,Herndon強調這些技術仍帶來的挑戰,同時關注如何保護創作者免受剝削的解決方案。她在 Holly+ 發表的一份聲明中提到「需要在保護藝術家和鼓勵人們嘗試新的令人興奮的技術之間找到平衡。」

 

Holly+ DAO 中融合機器學習和WEB3.0

Holly+ 的核心使命是使用新興技術的組合來使創新實現去中心化。
Holly Herndon其中一張專輯名稱為《Platform》。取名為平台原由是Herndon對於創造工作平台資本主義的批判。她認為許多人透過主流社群媒體為平台公司工作,並沒有真正從中獲得任何好處。而WEB3世界去中心化系統中有趣的交流互動以及應用吸引了她,同時,一直嘗試自己聲音和形象的Herndon對於智慧財產權的想法發生轉變。
最初由加密貨幣推廣的協議現在正被創意人員用來保存和追蹤其智慧財產權的數位證書,Holly+為開源模式,雖然每個人都可以任意使用,但Herndon仍保留了聲音模型的權利。為此,Holly+將來發展不可能在WEB2.0上,WEB3.0能透過驗證使用者開放身份並追溯原始來源。

(圖源:https://auction.holly.plus/)

萬一我身故,我覺得以去中心化的所有權方式來處理我的聲音模型會更好。讓一個由維護我的聲音價值和聲譽的人組成的DAO 來管理我的聲音模型,而不是讓不太熟悉與我的工作有關的價值和標準的人來進行。我希望在DAO 中去中心化的決策能夠通過辯論和共同利益來鼓勵對這些權利進行更細緻的管理” – Holly Herndon

Holly+ 目前由一個去中心化的自治組織或 DAO(註3) 監督,其目標除了對人類聲音的機器學習特徵進行實驗,為技術帶來的倫理問題找到解決方案之外也期望讓使用合成語音技術的社區來控制其作品所構成的生態系統。
DAO的民主投票制,將Holly Herndon聲音的官方使用授權給經過批准的藝術家,意味著每個創作都可以透過數據保障智慧財產權。Herndon Dryhurst 還推出了一個數字拍賣行,藝術家可以上傳和出售以她的肖像創作的作品。然後將收益用於開發新工具,藝術家可以使用這些工具來創作和銷售更多作品——這就是她最大的願景:讓個人創造力有助於全體福利的良性循環。

 

Holly Herdon於9月展示舞台,邀請歌手同時用不同麥克風(其中一隻是Holly聲音)進行演唱(來源:Youtube/TED)

 

註1:Deepfake是對一個人的人工複製。為了創建一個深度偽造,工程師將他們想要複製對象的大量資訊材料輸入複雜的程式中。
註2:語音模型是一種深度神經網絡,可以生成單個語音的原始音頻。透過錄製語音和目標語音的歌聲上進行訓練,並且能通過各種方式進行互動,從文本到語音應用程式到更複雜的互動,例如音樂風格轉換,其中來自一個聲音的音色可以轉換為類似目標聲音。
註3:DAO 為Decentralized autonomous organization縮寫,去中心化自治組織,決策以由下而上運作。

參考資料:
Mirror/ Holly Herndon 
The Fader|Holly Herndon on the power of machine learning and developing her “digital twin” Holly+
Document|Who does your voice belong to? For musician Holly Herndon, the answer is ‘everyone’
ARS ELECTRONICA|Holly+: Come and sing like Holly Herndon!

(相關閱讀:生下AI嬰兒的聲音藝術家- Holly Herndon藝術登陸Web 3.0Web3.0 聲音迭代實驗室

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *

相關文章

返回頂端