會議名稱：碩士班甄試生說明會 報 告 人：陳玲慧教授 中華民國95年12月01日

Presentation on theme: "會議名稱：碩士班甄試生說明會 報 告 人：陳玲慧教授 中華民國95年12月01日"— Presentation transcript:

1 會議名稱：碩士班甄試生說明會 報 告 人：陳玲慧教授 中華民國95年12月01日
資訊學院 研究能量與研發成果 會議名稱：碩士班甄試生說明會 報 告 人：陳玲慧教授 中華民國95年12月01日

2 資訊學院研究群 「多媒體工程研究所」研究群 Computer Vision and Image Processing
莊仁輝、陳稔、蔡文祥、林進燈、薛元澤、黃國源、陳玲慧、李嘉晃、林志青、荊宇泰、陳永昇、林正中、王才沛、林文杰 Graphics, Animation, and Gaming 施仁忠、莊榮宏、林奕成、吳毅成、孫春在、陳稔、林正中、林文杰 Multimedia and Contect Retrieval Systems 蔡淳仁、劉啟民、傅心家、李素瑛、蕭旭峰、 蔡文錦、 彭文孝、陳穎平 Digital Learning 曾憲雄、孫春在、陳登吉

3 資訊學院 研究能量與研發成果 「電腦視覺與影像處理研究群」

4 Computer vision and image processing Research Directions (CV)
Camera calibration W.H. Tsai, C.T. Lin, J.H. Chuang, Y.S. Chen, Z. Chen 3D spatial model and object reconstruction Location of moving robots W.H. Tsai, C.T. Lin, J.H. Chuang Navigation of automatic vehicles (with environment learning) W.H. Tsai, C.T. Lin Automatic tracing of target objects

5 Computer vision and image processing Sample R&D Results (CV)
Flying object automatic location and landing system Car driving assistant system Hand/finger-based pointing system 3D motion capture system Augment reality system

6 Computer vision and image processing Research Directions (IP)
Image enhancement and restoration Y.T. Ching, T. Wang, Y.C. Hsueh, K.Y. Huang, Y.S. Chen, C.C. Lin , L. H.Chen, Z. Chen Audio, image, and video compression C.H. Lee, C.C. Lin, J.H. Chuang Multimedia camouflage and digital watermark C.C. Lin, L.H. Chen Texture analysis and image segmentation C.H. Lee, Y.T. Ching, L.H. Chen Movie background construction Z. Chen, J.H. Chuang, L.H. Chen compression

7 Computer vision and image processing Research Directions (IP)
Continuous speech processing and recognition C.T. Lin, J.H. Chuang, K.Y. Huang

8 Computer vision and image processing Sample R&D Results (IP)
Image processing for digital camera Image database searching Intelligent video monitor system DNA sequence determination Chromosome recognition system Brain-machine interface based on brain wave DSP chip design and development

9 Intelligent video monitor system
有別於坊間所開發之入侵者追蹤系統需多支攝影機搭配，本技術可即時單一攝影機動態追蹤，並包含人與非人的物體識別能力，大幅解決目前安全監控系統對於動態物體(如動物、震動及各種風吹草動等)的誤判行為，而此技術已移植到embedded system上，大幅度縮減硬體的空間與成本，同時利於實際建置。搭配通訊模組的設計，可透過GPRS將入侵人員的影像傳送至屋主及保全人員的手機或是PDA上，隨時隨地提供屋主即時的保全資訊以做出立即的反應。 RS-485 PTZ Camera 智慧型 入侵者追蹤器 無線網路模組

10 Brain-machine interface based on brain wave
結合NBIC (奈米、生物、資訊、認知）技術，開發神經認知IT技術及所需之生醫訊號感測元件與裝置。 1. MEMS Sensors Physiological Signals Data Acquisition 2. Wireless Transceiver Augmented Human Performance Physical States 3. Performance Monitoring Mental States 4. Biofeedback

11 Brain-machine interface based on brain wave
結合NBIC (奈米、生物、資訊、認知）技術，開發神經認知IT技術及所需之生醫訊號感測元件與裝置。 1. MEMS Sensors 2. Wireless transceiver 發展人類神經、呼吸、心血管、與肌肉運動等生理系統之微機電感測晶片及無線傳輸晶片。 Physiological Data Acquisition Signals Augmented Human Performance 4. Biofeedback 發展生物回饋技術，以在偵測出人類在心理或生理狀態產生不適時，自動選擇在最適當的時機給予最有效的回饋/刺激訊號。 3. Performance Monitoring 結合不同生理感測訊號的量測與分析，及演算法以探討人類在各種視覺、聽覺及動感刺激下的生理反應與大腦認知/反應相關性。 Physical States Mental States

12 Computer vision and image processing
Major projects Construction of vision-based intelligent environment ( ) (學界科專計畫) W. H. Tsai, L. H. Chen, J. H. Chuang, Y. S. Chen Intelligent transportation system (ITS) — Smart vision ( ) (卓越計畫) C. T. Lin National digital archives program ( ) (國家型計畫) W. H. Tsai

13 Computer vision and image processing
Plans in the near future Super-sense interactive/intelligent environments Image/video retrieval Augmented reality system Research on multi-view video processing

14 多媒體工程研究所 電腦視覺與影像處理研究群 - 陳玲慧教授
研究興趣 Multimedia Steganography: Text, image video, audio Video compression H.264, MPEG4 Content-Based retrieval Video, audio, image 2D- code Pattern recognition: face, fingerprint

15 多媒體工程研究所 電腦視覺與影像處理研究群 - 陳玲慧教授
近兩年計畫 一個高效率之MPEG-7紋理瀏覽描述子的計算方法及其紋理瀏覽和紋理檢索之應用,NSC,2003/ 一個關於一般音訊資料之音訊分類，音訊分段和音訊檢索之研究，NSC,2005/ 音訊關鍵字偵測，經濟部科專,2003/

16 多媒體工程研究所 電腦視覺與影像處理研究群 - 陳玲慧教授
研究成果 Content-Based retrieval system Trademark, color image, texture, Audio Two patents for 2D- code 安全自由碼 一種個人資料身份證明文件認證之安全介面 Face location Sprite generator based on MPEG4 Fast algorithm for H.264

17 Color image retrieval system
Retrieval result of the big red flower Query

18 安全自由碼之設計及解碼 Robust for the following distortion:

19 Sprite generation

20 多媒體工程研究所兼資工所甲組 電腦視覺與影像處理研究群 –陳稔教授
研究領域: 電腦視覺與視訊監控、影像處理、虛擬實境與動畫、圖像辨識(人臉、指紋) 目前研究計畫: 國家科學委員會 多張影像間強健式點特徵抽取與快速特徵比對技術 光寶科技股份有限公司 數位相機之紅眼消除技術 工研院電光所 3D TV圖像技術:多相機之模型建構、實與虛場景之融合

21 最新人臉辨識成果–陳稔教授 (搜尋人臉特徵點與臉孔主軸之方位) (不同姿態臉孔比對示意圖：三條紅線檢驗圖中右眼、鼻尖、唇口特徵點對應)

22 近年來研究工作項目–陳稔教授 下列研究項目之展示Demo Video，請看系上網站或聯絡本人(Office: Room 523,Mobile: ) Augmented VR 虛與實融合 (余國華同學)    利用數位相機拍攝手法建立三 維人頭像 (吳昶澔同學) 人臉辨識 (鄭龍凱同學) 用攝影方式建構 3D Object Model (周宏隆同學) 360 度環場拍攝 (謝耀賢、 孫樹國同學) 影像中不同景深物體切割 (趙仁孝同學)  人體運動偵測與動作分析 (顧正偉、紀文原同學) 

23 多媒體工程研究所 電腦視覺與影像處理研究群 - 陳永昇教授
研究興趣（生醫訊號、醫學影像、電腦視覺） 腦部結構分析 腦部皮質分割與模型重建、腦圖譜 建構、腦部結構型態測量等 腦功能研究 腦電波腦磁波訊號分析、腦功能造 影、腦機介面系統等 視訊監控 相機參數校正、環境三維模型重建等

24 多媒體工程研究所 電腦視覺與影像處理研究群- 陳永昇教授
近兩年計畫 磁振造影與腦磁波圖/腦電波圖之自動化整合,NSC,2003/8-2004/7（主持人） 運動相關腦磁波之腦部信號源動態造影,NSC, 2003/8-2004/7（共同主持人） 利用幾何特徵擷取法以評估嚴重急性呼吸道症候群（SARS）胸部X 光表徵,榮總台聯大,2004/1-2004/12（主持人） 以視覺為基礎之智慧型環境的建構四年計畫,經濟部, 2004/5-2008/4 （子項計畫共同主持人） 腦部活動之電生理訊號源模型建立、估算、與分析,NSC,2004/8-2005/7（主持人） 利用皮質表面腦功能造影進行聽覺皮質頻率相依結構之群組分析,NSC, 2004/8-2005/7（共同主持人）

25 多媒體工程研究所 電腦視覺與影像處理研究群- 陳永昇教授
研究成果 腦圖譜之建構 腦電波活動源正向模型 利用腦電/磁波最大對比光束構成法來進行腦功能造影

26 多媒體工程研究所 電腦視覺與影像處理研究群- 王才沛教授
最近研究計畫 基於視訊分析之嬰幼兒弱視因子自動化篩檢系統 根據眼睛瞳孔之彩色影像判別嬰幼兒是否有可能導致弱視的視力問題，例如高度近視或遠視、視差、斜視、先天性白內障等。 淺地表下物體非接觸式偵測技術之信號處理 分析包括合成孔徑雷達、聲波、紅外線攝影等之信號以分辨地表下是否有物體及其性質。 研究興趣 影像分析及物件識別技術。 醫學影像分析及電腦輔助診斷。 分群法在影像處理之應用。 多媒體內容搜尋。 物理系統訊號分析。 基於物理原理之影像合成技術。

27 弱視因子自動化篩檢 Video攝影機 受測者 光源 特徵擷取 電腦視力診斷分析 篩檢結果判別

28 行動裝置可延伸人機介面系統 Extensible MMI system for mobile device
主持人：李嘉晃 研究生：黃明超, 林建良　 為使行動電話人機介面之畫面內容能產生豐富的外型變化，且能自訂功能選單以簡化操作方式，因此本計畫設計XMMI 2.0讓使用者可藉由修改MMDL文件，而自訂行動電話人機介面。 第二代可延伸人機介面系統(XMMI v2.0)由行動電話人機介面系統(MMIS)、行動電話人機介面描述　語言(MMDL)與編輯系統構成，如右圖1所示。使用者可用編輯系統　快速地設計行動電話人機介面並產生MMDL檔案，後將MMDL檔案　 上傳至使用MMIS的行動電話上，即完成人機介面的修改。 圖1 XMMI v2.0架構圖 圖2 編輯系統(SonyEricsson T290i之狀態完成圖) 在MMIS元件及相關圖片均具備之情況下，編輯系統只需花費1小時即可建構出SonyEricsson T290i所有功能選單之人機　介面狀態，如左圖2所示，共計約40個　狀態。人機介面狀態包含待機狀態、表格式選單及項目清單等三種。建構過程中，多數時間花費在鍵入項目清單之文字內容上。本系統與傳統的人機介面系統之差異在於更動後不需重新編譯連結。 右圖3用以說明更改人機介面狀態達到　使用者個人化行動電話人機介面。 右圖之Phonebook及Messages為SonyEricsson T290i之九宮格選單畫面， 經過簡單的操作，即可將其更換為動畫選單。整個變更之實作，在已具備MMIS元件及相關圖片之情況下，僅需花費10分鐘便可完成此變更動作。 圖3 功能選單之畫面

29 林文杰助理教授 多工所(&資工所甲組) Texture Analysis and Synthesis
研究領域: 影像處理、電腦視覺、電腦圖學、電腦動畫 Texture Analysis and Synthesis Texture synthesis evaluation Dynamic texture tracking Texture-based image/video editing Human Motion Tracking and Analysis

30 Dynamic Texture Tracking
Visibility map Tracked lattices Input Video Output Video

31 Texture-based Video Editing
Self-occlusion effect is preserved in letter ‘U’ Input Video Output Video