Simulations du VMike et ©valuations comparatives

  • View
    103

  • Download
    0

Embed Size (px)

Text of Simulations du VMike et ©valuations comparatives

  • Page 1
  • Simulations du VMike et valuations comparatives
  • Page 2
  • Projet de recherche sur crdit incitatif GET 2005 Page 2 Reconnaissance AV de la parole
  • Page 3
  • Projet de recherche sur crdit incitatif GET 2005 Page 3 Traitements audio Extraction du signal audio Dtection des chiffres Reconnaissance des chiffres: Paramtres acoustiques : MFCC HMMs indpendants du contexte Dcodage : algo. de Viterbi Bruitage de la parole Bruit : Babble Tests de reconnaissance
  • Page 4
  • Projet de recherche sur crdit incitatif GET 2005 Page 4 Traitements Vido Extraction des vidos Localisation des lvres Interpolation des images (mme cadence que la parole) Extraction des paramtres DCT et DCT2 (+LDA) Projections :PRO et PRO2 (+LDA) Tests de reconnaissance
  • Page 5
  • Projet de recherche sur crdit incitatif GET 2005 Page 5 Techniques de fusion Fusion des paramtres : Concatnation Rduction de la dimension : LDA Modlisation HMM classique avec un seul flux Fusion des scores : Multistream HMM
  • Page 6
  • Projet de recherche sur crdit incitatif GET 2005 Page 6 Rsultats exprimentaux Fusion des paramtres
  • Page 7
  • Projet de recherche sur crdit incitatif GET 2005 Page 7 Rsultats exprimentaux Fusion des scores : -5db
  • Page 8
  • Projet de recherche sur crdit incitatif GET 2005 Page 8 Bibliographie G. Potamianos, C. Neti, G. Gravier, A. Garp, A. W. Senior. Recent Advances in the Automatic Recognition of Audiovisuel Speech. In IEEE? Vol. 91, pages 1306-1326. sept 2003. J.N. Gowdy, A. Subramanya, C. Bartels, and J. Bilmes. DBN-Based Multi-Stream Models for Audio-Visual Speech Recognition IEEE Int. Conf. on Acoustics, Speech, and Signal Processing, May 2004. Montreal, Canada F. Brugger, L. Zouari, H. Bredin, A. Ameheaye, G. Chollet, D. Pastor et Y. Ni. Reconnaissance de la parole audiovisuelle par VMike. Accept aux XVImes Journes dEtude sur la Parole. Dinard 2006.