哼唱檢索之商品化 張智星 jang@cs.nthu.edu.tw http://www.cs.nthu.edu.tw/~jang 多媒體資訊檢索實驗室 清華大學 資訊工程系.

Slides:



Advertisements
Similar presentations
97 學年畢業旅行 — 行前說明 以下未討論定案 請在 3/2 後,才給學生看!. 97 學年畢業旅行 — 行前說明 3/18 07 : 40 前請到學校禮堂,記得要帶健保卡。 【說明 1 】遲到者,請先電話通知學校老師 【畢業旅行】與【家庭旅行】最大的不同,就是 注意集合時間,如果不準時,會影響全班的下一個行程.
Advertisements

戶外教學簡報戶外教學簡報 製作人:吳政威、張博崴、 侯銘廷、 賴委辰、吳紹祺、莊閔皓 製作日期: 100/4/23.
數學社群 教學分享 和平國小 陳淑渟老師 數學社群 教學分享 和平國小 陳淑渟老師. 小一常發生的 學習困難 定位板的應用 序數的學習 困難與教學 突破 主題大綱.
健康.安全年 製作 : 黃靜怡. 安全第一,我想,這是一句大家都耳熟能詳的話吧,說安全, 簡單的說,就是注意自己、眼睛要看、耳朵要聽,不要莽莽 撞撞的,安全是大家所期望的,而父母總是常常掛念我們, 就是希望我們能安全,畢竟,孩子是父母一輩子的牽掛,會 擔心我們的,往往就是關心我們的人,每個人都希望自己做.
【大願文教基金會】園藝治療師 黃盛璘督導、王麗玲執行. 年齡在 2 足歲以上 18 歲以下,經醫學中 心或區域醫 院鑑定為 重度、極重度 身心障礙,不具行動能 力、且不能自理生活,並持有身心障礙 手冊的新北市居民。 八里愛心教養院~服務對象.
第二十九课 致儿子书 张之洞.
如何陪伴孩子度過 高三歲月.
大安區簡介 人口:315,628人 面積:約 平方公里 本區位於台北市中央地帶:
把人的生命写在教育的旗帜上 了解一个案件 欣赏一篇散文 学习一种理念 感悟一个故事.
六大原因造成 現代人身體酸性化.
杜绝不良行为,远离违法犯罪 市公安局岳王派出所卓佳
第十章 儿童性别角色社会化.
【2008年高考重庆卷】A.当冰雪皑皑之际,唯独梅花昂然绽放于枝头,对生命充满希望和自信,教人精神为之一振。
景区讲解常用方法.
請購作業介紹與實務案例講解 主講人:長庚科技大學總務處 事務組周鴻奇組長
班級愛心小護士訓練 臺南市東區勝利國小 健康中心.
爸爸的2000元 一個孩子省思的故事.
法 在 身 边 杜绝不良行为,远离违法犯罪 —— 走好青春第一步.
项目四 营业税 山东经贸职业学院 财政金融系.
由“林则徐销烟” 说开来…… ——学校禁毒主题班会.
敬业·创业·乐业 ——我的成长之路 赵谦翔.
四年七班親師會 自信學習,健康成長.
醫療旅遊.
社會發展學系 簡 介.
人物小传:杨嘉嵋,1975年出生,国家 重点四川大学本科毕业,中国传媒大学博士毕业,现为上海政法学院讲师。多次发表学术论文:《试论社会主义法治的目标和现代法治精神的培育》发表于钦州师范高等专科学校校报2000年04期,《西部在引进,利用外资中应重视的问题及对策》发表于四川师范学院学报2000年05期,《试论毛泽东的刑法思想》发表于达县师范高等专科学校学报2001年01期,《美国著名主持人的十点共性》发表于中国广播电视学刊2007年08期,《我国电视法治节目的现状与提升》发表于新闻战线2008年08期。
淺談如何準備大學面試 國立清華大學 核子工程與科學研究所 梁正宏 竹北高中.
閱 讀 與 寫 作 能 力 的 提 升 桃園縣國教輔導員 陳筱玲.
第二章 语用的主要要素分析 第一节 语境 第二节 预设 第三节 角色 第四节 视角.
从从容容中考去.
噪音為人體的危害 組別:第四組 組員:黃翰揚4980N012(組長) 郭倩彣4980N003 吳啟瑋4980N025 陳凱傑4980N075.
美麗的星空 陳弦希製作.
性別刻板印象.
初三8班(上) 期末总结班会.
初三(上) 期末总结班会.
一週菜單設計.
学习消防 远离火灾 ——峨眉二小三(3)班主题班会 峨眉二小 杨建华.
改革开放给我们带来的变化 系别:11商务流通系 班级:物流四班 组员:物四男生组.
大村國小 尋根之旅.
那年我參加瑞士巴塞爾博覽會, 除了接單做貿易,還零售賣品, 以擴大出口商品的影響。
中國醫藥大學 北港分部簡報.
西安国际港务区 入区企业相关地方税收 知识培训
拒绝毒品健康成长 ——张鸿谊.
室内设计概论 艺 术 设 计 专 业 主讲:李博慧 为生活创造一个理想、舒适的内部环境
动商研究中心 让高校体育驶入快车道 --国家“学校体育”相关文件解读 2016 年 05 月 15 日.
第三章 领悟人生真谛 创造人生价值 第一节 树立正确的人生观 创造有价值的人生 第二节 第三节 科学对待人生环境.
鸟的生殖和发育.
我们的分工 摄影:岑融 问卷调查:蔡沁林 岑融 资料整理 :朱明珠 蒋佳烨 制作PPT:陈依纯 蔡沁林 文字图片美工:陈依纯
3 室内空间界面的设计 本章提要 本章主要介绍室内空间界面的设计,主要包括界面的要求、功能、选材等方面,以及界面处理的原则和要点等方面的知识。在学习过程中,要注意区分空间界面的共性特点和个性要求、室内界面设计的原则和要点,以指导今后的具体设计。
這 是 幾 點.
第十四章 中国特色社会主义事业的依靠力量. 第十四章 中国特色社会主义事业的依靠力量 内容提要 包括知识分子在内的工人、农民是中国特色社会主义事业的根本力量;改革开放以来出现的新的社会阶层是中国特色社会主义事业的建设者;必须认真贯彻尊重劳动、尊重知识、尊重知识人才、尊重创造的重大方针,最广泛最充分地调动一切积极因素;巩固和加强各族人民的团结合作。
詩詞曲文吟唱教學網站 一、忍把浮名,換了淺斟低唱:唐宋詞吟唱教學系統 二、不惜歌者苦,但傷知音稀:詩詞曲文三語吟唱讀系統 羅鳳珠.
终极(13)班 赵树杰 许志鹏 初二(13)班.
全面推廣政府服務流程改造 行政院研究發展考核委員會  主任委員 宋餘俠 102年7月17日.
中国政法大学卫生法研究中心 于秀艳 2011年6月28日 杭州
思想道德修养与法律基础.
第1課 華南地區— 海陸文化的交會區.
营改增对住宿餐饮行业的影响及应对措施 集美国税
節日狂歡轟炸耳仔.
平安是福 注意安全 珍爱生命 莫让父母的期盼转眼成空.
多元文化“地球村”—— 世界文化之旅.
力行“十戒” 预防犯罪 青少年法制教育辅导材料
歡樂大派對 六年七班 第一組 自然成果發表會.
中国最安逸的7座小城:找个地方,过慢生活 图文:网络 制作:涛声
破除迷思 落實通報─校園性騷擾、性侵害處理流程
東北林業大學第三屆海峽兩岸大學生 冰雪之情冬令營
淺談菸害防制法新修正內容 台灣新聞傳播與法律學會 台灣新聞傳播與法律學會.
專題報告: 沒有國哪裡會有家?.
105學年度 新北市英語歌曲演唱競賽 志工工作會議 105年11月18日 9:30-10:00 碧華國小演講廳 新北市三重區碧華國小.
網路智慧財產權 著作權法.
银川社保网上申报 宁夏人力资源和社会保障 网上服务大厅操作
Presentation transcript:

哼唱檢索之商品化 張智星 jang@cs.nthu.edu.tw http://www.cs.nthu.edu.tw/~jang 多媒體資訊檢索實驗室 清華大學 資訊工程系

「超級點歌王」音樂搜尋系統 功能: 特點: 使用者在搜尋音樂時,只需唱或哼歌曲的一小段,本系統即可進行比對,並將搜尋結果依相似度排序列出。 全世界辨識率最高的音樂搜尋系統(系統內有13,000首歌,從頭比對時,正確歌曲落於前20名的機率可達 80%)

點歌系統特點 直覺式歌曲輸入,完全不須知道歌曲的歌名、歌詞、演唱者等。 唱的、哼的,或樂器演奏都可以,完全無語言或國界的限制。 起音高低無所謂,系統都可以找的到! 連續地唱、自然地唱,不需刻意斷音。 不需要訓練過程,每個人都可以隨唱隨點。 可以從頭唱,也可以從歌曲中間開始唱。 不易受到噪音干擾。

旋律辨識展示 以內容為主的檢索 榕樹下 仿冒偵測 雙人枕頭 vs. 七夕情 從中間唱 …

多模式音樂搜尋引擎 多模式使用者介面 加速方式 Acoustic input Text input Query by Singing/Humming Query by Tapping (/jang/demo/tapping/go_tap.m) Query by Speech Text input Query by Keywords/Performers/Lyrics 加速方式 Cluster/Grid Computing

「超級點歌王」應用面 網際網路數位音樂搜尋引擎 卡拉OK 或 KTV 數位音樂圖書館/博物館 實體或網路音樂CD店(例:音樂地球村) 手機應用:哼唱轉鈴聲、鈴聲下載 高級(歌)聲控玩具 (例:會聽歌的菲比小精靈)

「超級點歌王」應用面 唐詩宋詞的吟唱比對 歌曲學習及評分精靈 業餘作曲家:哼唱轉midi 職業作曲家:查閱或參考相似曲風 偵測歌曲仿冒 以旋律(及聲紋)進行身分認證

現實世界之黑暗面 網際網路數位音樂搜尋引擎 卡拉OK 或 KTV 數位音樂圖書館/博物館、音樂CD店 辨識成功後要做什麼? 去哪裡收錢? 摔麥克風?猛按服務鈴? Tape->Wave/Mp3->Midi 之數位化成本? 數位音樂圖書館/博物館、音樂CD店 Tape->Wave/Mp3->Midi 之數位化成本?標準格式之建立? 如何在十秒內搜尋十萬首歌? 辨識成功後要做什麼? 當然是唱歌了,但歌從哪裡來?

現實世界之光明面 網際網路數位音樂搜尋引擎 卡拉OK 或 KTV 朝玩具晶片發展 鈴聲下載 電腦速度每18個月加倍成長 服務大眾,公益事業 卡拉OK 或 KTV 日本的卡拉OK皆有midi檔案(27000首歌) 朝玩具晶片發展 歌曲數量不多,辨識率亦不強求 鈴聲下載 唱歌選鈴聲,或自製鈴聲 電腦速度每18個月加倍成長 大家都喜歡唱歌比賽、拿獎金

相關網頁 技術說明(張老師網頁): 商業網站(清蔚科技): 相關產品: http://www.cs.nthu.edu.tw/~jang http://www.supermbox.com.tw 相關產品: 卡拉迷 哼唱鈴 唱歌狗(玩具)

Demo: 你來點,我來唱! 雙人枕頭 港都夜雨 雨夜花 白牡丹 望春風 惜別的海岸 送君珠淚滴 心事誰人知 相思雨 舊情綿綿 可憐戀花再會吧 思慕的人 望你早歸 安平追想曲 孤女的願望 媽媽請你也保重 山頂的黑狗兄 青蚵仔嫂 一粒流星 燒肉粽 阮若打開心內的窗 滿山春色 鑼聲若響 青春嶺 走馬燈 人生 車站 心內事無人知 飄浪之女 快樂的出航 能不能留住你 相逢夕陽下 午夜夢徊時 心聲淚痕 又是細雨 相見不如懷念 夢追酒 幸福在這裡 蘭花草 庭院深深 萍聚 難忘初戀的情人 外婆的澎湖灣 一簾幽夢 新鴛鴦蝴蝶夢 用心良苦 一串心 聽海 原來你什麼都不想要 浪人情歌 明天你是否依然愛我 戀曲 1980 娜奴娃情歌 最後一夜 平安夜 綠島小夜曲 夜來香 花心 南屏晚鐘

Karami: Internet Karaoke Synchronized lyrics Real-time pitch display Calory consumption Recording Real-time score Live broadcast Automatic key adjustment

超級明星學園

唱歌狗 會聽歌的大頭狗! http://www.amazon.com/exec/obidos/tg/stores/detail/-/toys/B000096QZW/glance/ref%3Dcm%5Frv%5Fthx%5Fview/102-2805142-5576935

相關研究 歌者辨識 歌聲、講話聲、笑聲辨識 蛙聲辨識 語音辨識 由主旋律自動產生和弦及伴奏 由MP3音樂辨識出人聲的主旋律 配合自製多軌鈴聲 由MP3音樂辨識出人聲的主旋律 自動搜尋 MP3/Wave 檔案 平行處理的音樂比對核心 加速音樂比對(www.google.com用了上萬台電腦)