31
資資資資 資資資資資資資資資 資資資資碩碩碩碩碩碩碩碩碩 資資資資資 資資資資 95 資 12 資 01 資

資訊學院 研究能量與研發成果

  • Upload
    eitan

  • View
    100

  • Download
    0

Embed Size (px)

DESCRIPTION

資訊學院 研究能量與研發成果. 會議名稱: 碩士班甄試生說明會 報 告 人:陳玲慧教授 中華民國 95 年 12 月 01 日. 資訊學院研究群. 「多媒體工程研究所」研究群 Computer Vision and Image Processing 莊仁輝、陳稔、蔡文祥、林進燈、薛元澤、黃國源、陳玲慧、李嘉晃、林志青、荊宇泰、陳永昇、林正中、王才沛、林文杰 Graphics, Animation, and Gaming 施仁忠、莊榮宏、林奕成、吳毅成、孫春在、陳稔、林正中、林文杰 Multimedia and Contect Retrieval Systems - PowerPoint PPT Presentation

Citation preview

Page 1: 資訊學院 研究能量與研發成果

資訊學院研究能量與研發成果

會議名稱:碩士班甄試生說明會報 告 人:陳玲慧教授

中華民國 95 年 12 月 01 日

Page 2: 資訊學院 研究能量與研發成果

資訊學院研究群 「多媒體工程研究所」研究群

Computer Vision and Image Processing 莊仁輝、陳稔、蔡文祥、林進燈、薛元澤、黃國源、陳玲慧、李嘉晃、林志青、荊宇泰、陳永昇、林正中、王才沛、林文杰

Graphics, Animation, and Gaming施仁忠、莊榮宏、林奕成、吳毅成、孫春在、陳稔、林正中、林文杰

Multimedia and Contect Retrieval Systems 蔡淳仁、劉啟民、傅心家、李素瑛、蕭旭峰、

蔡文錦、 彭文孝、陳穎平 Digital Learning

曾憲雄、孫春在、陳登吉

Page 3: 資訊學院 研究能量與研發成果

資訊學院研究能量與研發成果

「電腦視覺與影像處理研究群」

Page 4: 資訊學院 研究能量與研發成果

Computer vision and image processing Research Directions (CV)

Camera calibration W.H. Tsai, C.T. Lin, J.H. Chuang, Y.S. Chen, Z. Chen

3D spatial model and object reconstruction W.H. Tsai, C.T. Lin, J.H. Chuang, Y.S. Chen, Z. Chen

Location of moving robots W.H. Tsai, C.T. Lin, J.H. Chuang

Navigation of automatic vehicles (with environment learning) W.H. Tsai, C.T. Lin

Automatic tracing of target objects

Page 5: 資訊學院 研究能量與研發成果

Computer vision and image processing Sample R&D Results (CV)

Flying object automatic location and landing system

Car driving assistant system Hand/finger-based pointing system 3D motion capture system Augment reality system

Page 6: 資訊學院 研究能量與研發成果

Computer vision and image processingResearch Directions (IP)

Image enhancement and restoration Y.T. Ching, T. Wang, Y.C. Hsueh, K.Y. Huang, Y.S. Chen, C.C.

Lin , L. H.Chen, Z. Chen Audio, image, and video compression

C.H. Lee, C.C. Lin, J.H. Chuang Multimedia camouflage and digital watermark

C.C. Lin, L.H. Chen Texture analysis and image segmentation

C.H. Lee, Y.T. Ching, L.H. Chen Movie background construction

Z. Chen, J.H. Chuang, L.H. Chen

Page 7: 資訊學院 研究能量與研發成果

Computer vision and image processingResearch Directions (IP)

Continuous speech processing and recognition C.T. Lin, J.H. Chuang, K.Y. Huang

Page 8: 資訊學院 研究能量與研發成果

Computer vision and image processing Sample R&D Results (IP)

Image processing for digital camera Image database searching Intelligent video monitor system DNA sequence determination Chromosome recognition system Brain-machine interface based on brain

wave DSP chip design and development

Page 9: 資訊學院 研究能量與研發成果

RS-485

無線網路模組

PTZ Camera

智慧型入侵者追蹤器

Intelligent video monitor system

有別於坊間所開發之入侵者追蹤系統需多支攝影機搭配,本技術可即時單一攝影機動態追蹤,並包含人與非人的物體識別能力,大幅解決目前安全監控系統對於動態物體 ( 如動物、震動及各種風吹草動等 )的誤判行為,而此技術已移植到 embedded system 上,大幅度縮減硬體的空間與成本,同時利於實際建置。搭配通訊模組的設計,可透過 GPRS 將入侵人員的影像傳送至屋主及保全人員的手機或是 PDA 上,隨時隨地提供屋主即時的保全資訊以做出立即的反應。

Page 10: 資訊學院 研究能量與研發成果

Physiological

Signals

Data

Acquisition

3. Performance Monitoring

AugmentedHuman Performance

Physical States

Mental States

4. Biofeedback

結合 NBIC ( 奈米、生物、資訊、認知)技術,開發神經認知 IT技術及所需之生醫訊號感測元件與裝置。

1. MEMS Sensors

2. Wireless Transceiver

Brain-machine interface based on brain wave

Page 11: 資訊學院 研究能量與研發成果

結合 NBIC ( 奈米、生物、資訊、認知)技術,開發神經認知 IT技術及所需之生醫訊號感測元件與裝置。

Data

Acquisitio

n

Augmented Human Performance

Physical States

Mental States

1. MEMS Sensors2. Wireless transceiver發展人類神經、呼吸、心血管、與肌肉運動等生理系統之微機電感測晶片及無線傳輸晶片。

3. Performance Monitoring結合不同生理感測訊號的量測與分析,及演算法以探討人類在各種視覺、聽覺及動感刺激下的生理反應與大腦認知 /反應相關性。

4. Biofeedback發展生物回饋技術,以在偵測出人類在心理或生理狀態產生不適時,自動選擇在最適當的時機給予最有效的回饋 / 刺激訊號。

Brain-machine interface based on brain wave

Physiological

Signals

Page 12: 資訊學院 研究能量與研發成果

Computer vision and image processing Major projects

Construction of vision-based intelligent environment (2004-2008) ( 學界科專計畫 ) W. H. Tsai, L. H. Chen, J. H. Chuang, Y. S. Chen

Intelligent transportation system (ITS) — Smart vision (2002-2006) ( 卓越計畫 ) C. T. Lin

National digital archives program (2002-2007) ( 國家型計畫 ) W. H. Tsai

Page 13: 資訊學院 研究能量與研發成果

Computer vision and image processing Plans in the near future

Super-sense interactive/intelligent environments

Image/video retrieval Augmented reality system Research on multi-view video processing

Page 14: 資訊學院 研究能量與研發成果

研究興趣 Multimedia Steganography:

Text, image video, audio Video compression

H.264, MPEG4 Content-Based retrieval

Video, audio, image 2D- code Pattern recognition: face, fingerprint

多媒體工程研究所電腦視覺與影像處理研究群 - 陳玲慧教授

Page 15: 資訊學院 研究能量與研發成果

近兩年計畫 一個高效率之 MPEG-7 紋理瀏覽描述子的計算方法及其紋理瀏覽和紋理檢索之應用 ,NSC,2003/8-2005-7

一個關於一般音訊資料之音訊分類,音訊分段和音訊檢索之研究, NSC,2005/8-2007-7

音訊關鍵字偵測音訊關鍵字偵測,經濟部科專 ,2003/5-2004-4

多媒體工程研究所電腦視覺與影像處理研究群 - 陳玲慧教授

Page 16: 資訊學院 研究能量與研發成果

研究成果 Content-Based retrieval system

Trademark, color image, texture, Audio Two patents for 2D- code

安全自由碼 一種個人資料身份證明文件認證之安全介面

Face location Sprite generator based on MPEG4 Fast algorithm for H.264

多媒體工程研究所電腦視覺與影像處理研究群 - 陳玲慧教授

Page 17: 資訊學院 研究能量與研發成果

Color image retrieval system

Retrieval result of the big red flower

Query

Page 18: 資訊學院 研究能量與研發成果

安全自由碼之設計及解碼

Robust for the following distortion:

Page 19: 資訊學院 研究能量與研發成果

Sprite generation

Page 20: 資訊學院 研究能量與研發成果

多媒體工程研究所兼資工所甲組電腦視覺與影像處理研究群 –陳稔教授

研究領域:

電腦視覺與視訊監控、影像處理、虛擬實境與動畫、圖像辨識(人臉、指紋)

目前研究計畫:

國家科學委員會 多張影像間強健式點特徵抽取與快速特徵比對技術

光寶科技股份有限公司 數位相機之紅眼消除技術工研院電光所 3D TV 圖像技術 : 多相機之模型建構、

實與虛場景之融合

Page 21: 資訊學院 研究能量與研發成果

最新人臉辨識成果–陳稔教授

( 搜尋人臉特徵點與臉孔主軸之方位 )

( 不同姿態臉孔比對示意圖:三條紅線檢驗圖中右眼、鼻尖、唇口特徵點對應 )

Page 22: 資訊學院 研究能量與研發成果

近年來研究工作項目–陳稔教授

下列研究項目之展示 Demo Video ,請看系上網站或聯絡本人 (Office: Room 523,Mobile:0968674701)Augmented VR 虛與實融合 ( 余國華同學 ) 利用數位相機拍攝手法建立三 維人頭像 (吳昶澔同學 ) 人臉辨識 ( 鄭龍凱同學 ) 用攝影方式建構 3D Object Model ( 周宏隆同學 )360 度環場拍攝 ( 謝耀賢、 孫樹國同學 )影像中不同景深物體切割 ( 趙仁孝同學 ) 人體運動偵測與動作分析 ( 顧正偉、紀文原同學 )

Page 23: 資訊學院 研究能量與研發成果

多媒體工程研究所電腦視覺與影像處理研究群 - 陳永昇教授

研究興趣(生醫訊號、醫學影像、電腦視覺) 腦部結構分析

腦部皮質分割與模型重建、腦圖譜建構、腦部結構型態測量等

腦功能研究 腦電波腦磁波訊號分析、腦功能造影、腦機介面系統等

視訊監控 相機參數校正、環境三維模型重建等

Page 24: 資訊學院 研究能量與研發成果

多媒體工程研究所電腦視覺與影像處理研究群 - 陳永昇教授

近兩年計畫 磁振造影與腦磁波圖 /腦電波圖之自動化整合 ,NSC,2003/

8-2004/7(主持人) 運動相關腦磁波之腦部信號源動態造影 ,NSC, 2003/8-2004

/7(共同主持人) 利用幾何特徵擷取法以評估嚴重急性呼吸道症候群( SAR

S )胸部 X 光表徵 ,榮總台聯大 ,2004/1-2004/12(主持人)

以視覺為基礎之智慧型環境的建構四年計畫 ,經濟部 , 2004/5-2008/4 (子項計畫共同主持人)

腦部活動之電生理訊號源模型建立、估算、與分析 ,NSC,2004/8-2005/7(主持人)

利用皮質表面腦功能造影進行聽覺皮質頻率相依結構之群組分析 ,NSC, 2004/8-2005/7(共同主持人)

Page 25: 資訊學院 研究能量與研發成果

多媒體工程研究所電腦視覺與影像處理研究群 - 陳永昇教授

研究成果 腦圖譜之建構 腦電波活動源正向模型 利用腦電 /磁波最大對比光束構成法來進行腦功能造影

Page 26: 資訊學院 研究能量與研發成果

最近研究計畫• 基於視訊分析之嬰幼兒弱視因子自動化篩檢系統

• 根據眼睛瞳孔之彩色影像判別嬰幼兒是否有可能導致弱視的視力問題,例如高度近視或遠視、視差、斜視、先天性白內障等。

• 淺地表下物體非接觸式偵測技術之信號處理• 分析包括合成孔徑雷達、聲波、紅外線攝影等之信號以分辨地表下是否有物體及其性質。

研究興趣• 影像分析及物件識別技術。• 醫學影像分析及電腦輔助診斷。• 分群法在影像處理之應用。• 多媒體內容搜尋。• 物理系統訊號分析。• 基於物理原理之影像合成技術。

多媒體工程研究所電腦視覺與影像處理研究群 - 王才沛教授

Page 27: 資訊學院 研究能量與研發成果

Video 攝影機受測者

光源

特徵擷取電腦視力診斷分析篩檢結果判別

弱視因子自動化篩檢

Page 28: 資訊學院 研究能量與研發成果

行動裝置可延伸人機介面系統Extensible MMI system for mobile device

主持人:李嘉晃 教授    [email protected] 研究生:黃明超 , 林建良 

為使行動電話人機介面之畫面內容能產生豐富的外型變化,且能自訂功能選單以簡化操作方式,因此本計畫設計 XMMI 2.0讓使用者可藉由修改MMDL 文件,而自訂行動電話人機介面。

圖 2 編輯系統 (SonyEricsson T290i 之狀態完成圖 )

在 MMIS 元件及相關圖片均具備之情況下,編輯系統只需花費 1小時即可建構出 SonyEricsson T290i 所有功能選單之人機 介面狀態,如左圖 2 所示,共計約 40 個 狀態。人機介面狀態包含待機狀態、表格式選單及項目清單等三種。建構過程中,多數時間花費在鍵入項目清單之文字內容上。本系統與傳統的人機介面系統之差異在於更動後不需重新編譯連結。

第二代可延伸人機介面系統 (XMMI v2.0) 由行動電話人機介面系統 (MMIS) 、行動電話人機介面描述 語言 (MMDL) 與編輯系統構成,如右圖 1所示。使用者可用編輯系統 快速地設計行動電話人機介面並產生 MMDL檔案,後將MMDL檔案 上傳至使用 MMIS 的行動電話上,即完成人機介面的修改。

編輯 系統

PCMobile Phone

MMIS

RTOS

MMDL

Output(Screen, Speaker)

圖 1 XMMI v2.0架構圖

右圖 3 用以說明更改人機介面狀態達到 使用者個人化行動電話人機介面。右圖之 Phonebook 及 Messages為 SonyEricsson T290i之九宮格選單畫面,經過簡單的操作,即可將其更換為動畫選單。整個變更之實作,在已具備MMIS 元件及相關圖片之情況下,僅需花費 10 分鐘便可完成此變更動作。

圖 3 功能選單之畫面

Page 29: 資訊學院 研究能量與研發成果

林文杰助理教授多工所 (& 資工所甲組 )

研究領域 :影像處理、電腦視覺、電腦圖學、電腦動畫

Texture Analysis and Synthesis Texture synthesis evaluation Dynamic texture tracking Texture-based image/video editing

Human Motion Tracking and Analysis

Page 30: 資訊學院 研究能量與研發成果

Dynamic Texture Tracking

Tracked latticesVisibility map

Input Video Output Video

Page 31: 資訊學院 研究能量與研發成果

Texture-based Video Editing

Input Video Output Video

Self-occlusion effect is preserved in letter ‘U’