【創意科技】透過簡單的機器學習,來實現用「語音識別」玩小遊戲!

【創意科技】透過簡單的機器學習,來實現用「語音識別」玩小遊戲!
創意科技應用, 機器學習

大家可能有在手機上玩過一些小遊戲APP,會讓玩家透過人聲來控制角色的移動。如果想要在個人電腦上達成這樣的應用,又不想要寫太多Code,我們應該怎麼透過數位工具與Creative Coding來實現呢?

下面這個影片是一個簡易示範:

https://www.youtube.com/watch?v=1S1L1ZIRebk

我們使用的軟體包括Processing、Wekinator跟以Openframework編寫的音訊分析軟體。在抓取出聲音參數後,就交由Wekinator來負責建立機器學習模型並分析即時數據。這邊使用的是Dynamic Time Warping,因為Voice Command都是帶有時間性的一小段聲音指令,每次可能想要下達同個指令,但聲音時間長度會不一樣,因此會需要分析Time-Based的各種Feature變化。

延伸閱讀: 給麻瓜的開源機器學習軟體Wekinator介紹

在影片中,大家應該都能看出,紅色小點是由聲音來驅動,我們可以透過簡單的訓練過程,讓紅點點學會往左、往右、向上跳,並透過不下任何指令的訓練,告訴系統如果沒有下達聲音指令,紅色小點就要維持停在原地不動。

有沒有覺得應用機器學習後,很多困難的事情都變得很簡單呢?大家有什麼應用機器學習的創意點子都歡迎跟我們分享、交流!


探索更多音樂、科技、藝術的交匯與創新應用,現在就訂閱我們!

相關文章

活動回顧|工研院藝術進駐 x 長者創作互動日

活動回顧|工研院藝術進駐 x 長者創作互動日

圖說:長者體驗數位同動車 2026 年 3 月 12 日下午,工研院藝術進駐團隊前往新北市淡水義山里公共托老中心,舉辦為期兩小時的「長者創作互動日」,邀請約 13 位長者共同參與。參與者包含具備基礎手部活動能力、樂於分享

閱讀更多 »
《節奏繞纏》紀柏豪 × 工研院藝術進駐

《節奏繞纏》紀柏豪 × 工研院藝術進駐

紀柏豪於工研院藝術進駐期間發展《節奏繞纏》,將呼吸、握力與上肢動作等生理訊號轉為聲音,並把復健輔具同動車改造成會發聲的互動裝置。內含摺頁電子版與 2026 科藝未來沙龍講座式表演。

閱讀更多 »

融聲創意|ZONE SOUND CREATIVE

聚焦音樂、科技與藝術

訂閱電子報,探索創意與科技的無限可能!
Subscribe to explore sonic creativity and beyond.

© 2024 All rights Reserved.