教育部資通訊軟體創新人才推升推廣計畫 智慧終端與人機互動軟體創作專題競賽報告 指導老師：鄭欣明 開發團隊：Connectivity

Presentation on theme: "教育部資通訊軟體創新人才推升推廣計畫 智慧終端與人機互動軟體創作專題競賽報告 指導老師：鄭欣明 開發團隊：Connectivity"— Presentation transcript:

1 教育部資通訊軟體創新人才推升推廣計畫 智慧終端與人機互動軟體創作專題競賽報告 指導老師：鄭欣明 開發團隊：Connectivity
國立臺灣科技大學資訊工程系 2015/12/11

2 作品動機與簡介 作品動機: Harmony 簡介: 對於指揮家還有演奏者們而言,
要有一場完美的演出除了事前在台下的苦練,還有一件更重要的事情──翻樂譜,不需要用手去翻樂譜且能持續演奏,是我們想完成的動機。 Harmony 簡介: 透過穿戴式裝置,將樂譜電子化,運用 BLE 傳輸將進行演奏的小節資料傳遞到平板的電子譜上,以達到自動翻頁的效果。

3 需求分析

4 問題探討 解決方式 利用APP判斷指揮動作與演奏進度 ，使團員的樂譜會自動翻頁 指揮樂團演奏時，團員需自行翻譜
使用指揮家系統，以達到一對多、 客製化的控制功能 利用電子樂譜，即可達到無紙化的 效果 使用具自動翻頁功能的電子樂譜， 即可解決該問題 指揮樂團演奏時，團員需自行翻譜 因每個團員翻譜時機不同，所以每 個人只能自行翻譜 一般紙本樂譜量多且重，在戶外演 奏還有樂譜被吹飛的問題 一般樂譜會有特殊設計使其易於翻 頁，但電子譜沒有該設計

5 作品特色 無紙化之電子樂譜 演奏者不須額外動作即可手動翻頁 具備一對多的控制功能，可一次控制大編制樂團的所有樂譜 利用BLE達到省電效果
演奏者不須額外動作即可手動翻頁  具備一對多的控制功能，可一次控制大編制樂團的所有樂譜 利用BLE達到省電效果 利用自動翻頁使樂譜無須因手動翻頁而做特殊設計 

6 創意功能 利用既定動作來操控翻頁時機 提供一對多的控制功能 利用電子樂譜達到無紙化效果 以自動翻頁處理傳統手動翻頁的問題

7 系統設計

8 收集指揮手勢資訊、分析手勢 進度掌控 廣播傳輸媒介 顯示樂譜、客製化自動換頁

9 系統測試 低能耗公板: ARM-Cortex-M0 with BLE support embedded (科專成果) Android SDK
運用公板的九軸Sensor，感應指揮手勢之加速度與轉動方向，並使用現有的library來分辨指揮家的動作，在變換小節時通知指揮家平板。 低能耗公板: ARM-Cortex-M0 with BLE support embedded (科專成果) 指揮家平板端：將小節變換資訊透過BLE廣播給演奏者平板後，監控整體演奏進度，為指揮顯示樂譜並依據指揮家的習慣(提早多少小節)進行翻頁。 演奏者平板端：依據指揮家平板送出的小節變換資訊來判斷各自的演奏進度，並依據演奏者的習慣(提早多少小節)來翻頁。 Android SDK

10 與目前應用服務之差異性 O X 產品 功能 My Musician (樂譜系統) Tonara (辨音樂譜) Magic Reader
(閱讀系統) DeepDish Gigbook (樂譜管理系統) AirTurn BT-105 (踏板翻頁系統) 本產品 自動翻頁 O X 一對多控制 樂團實際可用性

11 功能說明

12 平板&指揮家手環

13 手環穿戴圖

14 APP操作圖-登入畫面

15 APP操作圖-選擇角色

16 APP操作圖-樂譜選單

17 APP操作圖-錄製&播放

18 參考資料 [My musician] “經濟部 搶鮮大賽” [online] Available, [Tonara] “Tonara - Sheet Music Viewer That Listens To You”[online] Available, [Magic Reader] “MagicReader on the App Store on iTunes” [online] Available, [DeepDish Gigbook] “Deep Dish Designs LLC” [online] Available, [AirTurn BT-105] “Displaying items by tag: BT105” [online] Available,

19 Thank you