《無形介面 Invisible Interfaces》克雷塔羅市博物館展出計畫
《無形介面 Invisible Interfaces》是一個跨學科創作計畫，聚焦於環境感知和氣候議題。融聲創意與dériveLAB、BEMA，前往墨西哥進行交流與駐地創作。我們希望透過當代藝術方法和新興技術來了解和認識氣候緊急情況，以彌合生態信息和接收者之間的差距。
【創意科技】透過簡單的機器學習，來實現用「語音識別」玩小遊戲！
大家可能有在手機上玩過一些小遊戲APP，會讓玩家透過人聲來控制角色的移動。如果想要在個人電腦上達成這樣的應用，又不想要寫太多Code，我們應該怎麼透過數位工具與Creative Coding來實現呢？
下面這個影片是一個簡易示範：
我們使用的軟體包括Processing、Wekinator跟以Openframework編寫的音訊分析軟體。在抓取出聲音參數後，就交由Wekinator來負責建立機器學習模型並分析即時數據。這邊使用的是Dynamic Time Warping，因為Voice Command都是帶有時間性的一小段聲音指令，每次可能想要下達同個指令，但聲音時間長度會不一樣，因此會需要分析Time-Based的各種Feature變化。
在影片中，大家應該都能看出，紅色小點是由聲音來驅動，我們可以透過簡單的訓練過程，讓紅點點學會往左、往右、向上跳，並透過不下任何指令的訓練，告訴系統如果沒有下達聲音指令，紅色小點就要維持停在原地不動。
有沒有覺得應用機器學習後，很多困難的事情都變得很簡單呢？大家有什麼應用機器學習的創意點子都歡迎跟我們分享、交流！
探索更多音樂、科技、藝術的交匯與創新應用，現在就訂閱我們！
來自台灣台北，現為「融聲創意」負責人。倫敦大學金匠學院音樂碩士、台灣大學經濟系學士。主要關注領域為Interactive&Generative Music、Sonification與Sonic Agency等。曾入選國藝會「海外藝遊專案」、雲門基金會「流浪者計畫」，並於荷蘭V2動態媒體中心(2014)、西班牙Laboral藝術與創意產業中心(2016)、英國FACT(2018)等科技藝術機構駐村。除創作外，亦廣泛參與教育推廣、跨界合作與表演藝術項目，文章散見於紙本與網路媒體。近兩年曾參與澳門文化中心《歲·月·舞聲》與兒童劇版本《歲·月·童聲》、澳門藝術節聲景劇場《甲戌風災》、衛武營《工業城市》、深圳舞蹈節《Well Come》、jpg擊樂實驗室《ReDefine》、《3.14159共感服裝實驗展演》等表演製作。2019年獲選為國家兩廳院駐館藝術家。
相關文章
AI注入新的靈魂：虛擬音樂家
探索創意人工智慧中有趣的音樂應用之一：虛擬音樂家創作音樂，一個虛擬角色也可以像人類藝術家一樣發布音樂。不同於大家熟悉的虛擬藝術家，其背後音樂是由人類協助創作的，人工智慧生成的音樂家，其音樂和文字完全由人工智慧工具驅動，沒有人類在背後協助創作，而是引入新的「靈魂」
探索數據的詮釋與批判
數據以及技術中控制、規範、監視的關係是什麼？數據是否建構了網絡、決定生物的行為與觀點，並且進一步行使權力和控制知識？聲音是如何讓數據擁有「行動」與「說話」的能力？數據除了是資料聲音化的重要元素，它也同時與環境、技術、政治、社會相互纏結，並與我們的日常生活有著看似微不足道、卻又極具影響力與震撼力的互動關係。
