教育部資通訊軟體創新人才推升推廣計畫 智慧終端與人機互動軟體創作專題競賽報告 指導老師:鄭欣明 開發團隊:Connectivity 國立臺灣科技大學資訊工程系 2015/12/11
作品動機與簡介 作品動機: Harmony 簡介: 對於指揮家還有演奏者們而言, 要有一場完美的演出除了事前在台下的苦練,還有一件更重要的事情──翻樂譜,不需要用手去翻樂譜且能持續演奏,是我們想完成的動機。 Harmony 簡介: 透過穿戴式裝置,將樂譜電子化,運用 BLE 傳輸將進行演奏的小節資料傳遞到平板的電子譜上,以達到自動翻頁的效果。
需求分析
問題探討 解決方式 利用APP判斷指揮動作與演奏進度 ,使團員的樂譜會自動翻頁 指揮樂團演奏時,團員需自行翻譜 使用指揮家系統,以達到一對多、 客製化的控制功能 利用電子樂譜,即可達到無紙化的 效果 使用具自動翻頁功能的電子樂譜, 即可解決該問題 指揮樂團演奏時,團員需自行翻譜 因每個團員翻譜時機不同,所以每 個人只能自行翻譜 一般紙本樂譜量多且重,在戶外演 奏還有樂譜被吹飛的問題 一般樂譜會有特殊設計使其易於翻 頁,但電子譜沒有該設計
作品特色 無紙化之電子樂譜 演奏者不須額外動作即可手動翻頁 具備一對多的控制功能,可一次控制大編制樂團的所有樂譜 利用BLE達到省電效果 演奏者不須額外動作即可手動翻頁 具備一對多的控制功能,可一次控制大編制樂團的所有樂譜 利用BLE達到省電效果 利用自動翻頁使樂譜無須因手動翻頁而做特殊設計
創意功能 利用既定動作來操控翻頁時機 提供一對多的控制功能 利用電子樂譜達到無紙化效果 以自動翻頁處理傳統手動翻頁的問題
系統設計
收集指揮手勢資訊、分析手勢 進度掌控 廣播傳輸媒介 顯示樂譜、客製化自動換頁
系統測試 低能耗公板: ARM-Cortex-M0 with BLE support embedded (科專成果) Android SDK 運用公板的九軸Sensor,感應指揮手勢之加速度與轉動方向,並使用現有的library來分辨指揮家的動作,在變換小節時通知指揮家平板。 低能耗公板: ARM-Cortex-M0 with BLE support embedded (科專成果) 指揮家平板端:將小節變換資訊透過BLE廣播給演奏者平板後,監控整體演奏進度,為指揮顯示樂譜並依據指揮家的習慣(提早多少小節)進行翻頁。 演奏者平板端:依據指揮家平板送出的小節變換資訊來判斷各自的演奏進度,並依據演奏者的習慣(提早多少小節)來翻頁。 Android SDK
與目前應用服務之差異性 O X 產品 功能 My Musician (樂譜系統) Tonara (辨音樂譜) Magic Reader (閱讀系統) DeepDish Gigbook (樂譜管理系統) AirTurn BT-105 (踏板翻頁系統) 本產品 自動翻頁 O X 一對多控制 樂團實際可用性
功能說明
平板&指揮家手環
手環穿戴圖
APP操作圖-登入畫面
APP操作圖-選擇角色
APP操作圖-樂譜選單
APP操作圖-錄製&播放
參考資料 [My musician] “經濟部 搶鮮大賽” [online] Available, http://www.getfresh.org.tw/achievement_detail.aspx?A_Type=A&Champion=&No=23 [Tonara] “Tonara - Sheet Music Viewer That Listens To You”[online] Available, http://tonara.com/ [Magic Reader] “MagicReader on the App Store on iTunes” [online] Available, https://itunes.apple.com/tw/app/magicreader/id505117386?mt=8 [DeepDish Gigbook] “Deep Dish Designs LLC” [online] Available, http://www.deepdishdesigns.com/ [AirTurn BT-105] “Displaying items by tag: BT105” [online] Available, http://www.airturn.com/
Thank you