Download presentation
Presentation is loading. Please wait.
1
哼唱檢索之商品化 張智星 jang@cs.nthu.edu.tw http://www.cs.nthu.edu.tw/~jang
多媒體資訊檢索實驗室 清華大學 資訊工程系
2
「超級點歌王」音樂搜尋系統 功能： 特點： 使用者在搜尋音樂時，只需唱或哼歌曲的一小段，本系統即可進行比對，並將搜尋結果依相似度排序列出。
全世界辨識率最高的音樂搜尋系統（系統內有13,000首歌，從頭比對時，正確歌曲落於前20名的機率可達 80%）
3
點歌系統特點 直覺式歌曲輸入，完全不須知道歌曲的歌名、歌詞、演唱者等。 唱的、哼的，或樂器演奏都可以，完全無語言或國界的限制。
起音高低無所謂，系統都可以找的到！ 連續地唱、自然地唱，不需刻意斷音。 不需要訓練過程，每個人都可以隨唱隨點。 可以從頭唱，也可以從歌曲中間開始唱。 不易受到噪音干擾。
4
旋律辨識展示 以內容為主的檢索 榕樹下 仿冒偵測 雙人枕頭 vs. 七夕情 從中間唱 …
5
多模式音樂搜尋引擎 多模式使用者介面 加速方式 Acoustic input Text input
Query by Singing/Humming Query by Tapping (/jang/demo/tapping/go_tap.m) Query by Speech Text input Query by Keywords/Performers/Lyrics 加速方式 Cluster/Grid Computing
6
「超級點歌王」應用面 網際網路數位音樂搜尋引擎 卡拉OK 或 KTV 數位音樂圖書館/博物館 實體或網路音樂CD店（例：音樂地球村）
手機應用：哼唱轉鈴聲、鈴聲下載 高級（歌）聲控玩具 （例：會聽歌的菲比小精靈）
7
「超級點歌王」應用面 唐詩宋詞的吟唱比對 歌曲學習及評分精靈 業餘作曲家：哼唱轉midi 職業作曲家：查閱或參考相似曲風 偵測歌曲仿冒
以旋律（及聲紋）進行身分認證
8
現實世界之黑暗面 網際網路數位音樂搜尋引擎 卡拉OK 或 KTV 數位音樂圖書館/博物館、音樂CD店 辨識成功後要做什麼？ 去哪裡收錢？
摔麥克風？猛按服務鈴？ Tape->Wave/Mp3->Midi 之數位化成本？ 數位音樂圖書館/博物館、音樂CD店 Tape->Wave/Mp3->Midi 之數位化成本？標準格式之建立？ 如何在十秒內搜尋十萬首歌？ 辨識成功後要做什麼？ 當然是唱歌了，但歌從哪裡來？
9
現實世界之光明面 網際網路數位音樂搜尋引擎 卡拉OK 或 KTV 朝玩具晶片發展 鈴聲下載 電腦速度每18個月加倍成長
服務大眾，公益事業 卡拉OK 或 KTV 日本的卡拉OK皆有midi檔案（27000首歌） 朝玩具晶片發展 歌曲數量不多，辨識率亦不強求 鈴聲下載 唱歌選鈴聲，或自製鈴聲 電腦速度每18個月加倍成長 大家都喜歡唱歌比賽、拿獎金
10
相關網頁 技術說明（張老師網頁）： 商業網站（清蔚科技）： 相關產品： http://www.cs.nthu.edu.tw/~jang
相關產品： 卡拉迷 哼唱鈴 唱歌狗（玩具）
11
Demo: 你來點，我來唱！ 雙人枕頭 港都夜雨 雨夜花 白牡丹 望春風 惜別的海岸 送君珠淚滴 心事誰人知 相思雨 舊情綿綿
可憐戀花再會吧 思慕的人 望你早歸 安平追想曲 孤女的願望 媽媽請你也保重 山頂的黑狗兄 青蚵仔嫂 一粒流星 燒肉粽 阮若打開心內的窗 滿山春色 鑼聲若響 青春嶺 走馬燈 人生 車站 心內事無人知 飄浪之女 快樂的出航 能不能留住你 相逢夕陽下 午夜夢徊時 心聲淚痕 又是細雨 相見不如懷念 夢追酒 幸福在這裡 蘭花草 庭院深深 萍聚 難忘初戀的情人 外婆的澎湖灣 一簾幽夢 新鴛鴦蝴蝶夢 用心良苦 一串心 聽海 原來你什麼都不想要 浪人情歌 明天你是否依然愛我 戀曲 1980 娜奴娃情歌 最後一夜 平安夜 綠島小夜曲 夜來香 花心 南屏晚鐘
12
Karami: Internet Karaoke
Synchronized lyrics Real-time pitch display Calory consumption Recording Real-time score Live broadcast Automatic key adjustment
13
超級明星學園
14
唱歌狗 會聽歌的大頭狗！
15
相關研究 歌者辨識 歌聲、講話聲、笑聲辨識 蛙聲辨識 語音辨識 由主旋律自動產生和弦及伴奏 由MP3音樂辨識出人聲的主旋律
配合自製多軌鈴聲 由MP3音樂辨識出人聲的主旋律 自動搜尋 MP3/Wave 檔案 平行處理的音樂比對核心 加速音樂比對（
Similar presentations
