A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG
Gósy Mária
MTA Nyelvtudományi Intézet,
Kempelen Farkas Beszédkutató Laboratórium
A FONETIKA TÖRTÉNETÉBŐL
Az első teljes magyar hangtan:
Bél Mátyás (1718) munkája,terjedelme: 7 oldal!
Bél Mátyás „modern” megállapításai:• a hangokat másként ejtjük a szó különböző
helyein;• a hangoknak stilisztikai sajátosságuk van;• némely mássalhangzónk összetett;• a kiejtés számos tényező függvénye.
A FONETIKA TÖBB TUDOMÁNY HATÁRTERÜLETÉN
Agykutatás
Neurolingvisztika
Pszicholingvisztika
Neurológia
Pszichológia
Fizikai akusztika
Nyelvtudomány
FONETIKA
Fül-orr-gégészet
Foniátria
Audiológia
Pszichoakusztika
Fonológia
Agykutatás
Neurolingvisztika
Pszicholingvisztika
Neurológia
Pszichológia
Fizikai akusztika
Nyelvtudomány
FONETIKA
Fül-orr-gégészet
Foniátria
Audiológia
Pszichoakusztika
Fonológia
A BESZÉD
KÉT ALAPKÉRDÉS
1. MI A KAPCSOLAT A FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT?
2. MI A KAPCSOLAT AZ ALKALMAZOTT FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT?
BESZÉD
fonológia
fonetika
beszédtechnológia
alkalmazottfonetika
beszédtechnikabeszédzavarok
beszéd-hallás
beszélő felismerése
FELHASZ-NÁLÁS
digitális jel-feldolgozás
beszéd-szintézis
beszédfelismerés
zajtisztításbeszélőazonosítás
(verifikálás)
FONETIKA, BESZÉDTECHNOLÓGIA, ALKALMAZÁSOK
fonetika
beszédtechnológia
alkalmazottfonetika
beszéd-hallás
beszélő felismerése
beszéd-szintézis
A MAGYAR BESZÉD-TECHNOLÓGIA KEZDETEI
• az első működő beszélőgép:
Kempelen Farkas (1791)
• kísérlet magánhangzók mesterséges felismerésére: Tarnóczy (1950-es évek)
• Kossuth hangjának „megtisztítása”
• analóg beszédjel digitális átalakítása:
az első számítógépek
MAGÁNHANGZÓK HANGSZÍNKÉPEI
á a o ü e ö i u o a á i é e ü ö
Bal oldalon: Kempelen gépének hangjai
Jobb oldalon: ember ejtette hangok
Egy magyar napilap Egy magyar napilap Tudomány és technika Tudomány és technika rovata hírt ad rovata hírt ad angol és német mérnökök angol és német mérnökök mesterségesbeszéd-előállításárólmesterségesbeszéd-előállításáról
rajzolt rezgésképből beszédrajzolt rezgésképből beszéd
„HANGFANTÓMOK”: 1939
HANGELEMEK „FESTÉSE” A MEGSZÓLALTATÁSHOZ
AZ ELSŐ MAGYARFORMÁNS-SZINTETIZÁTOR
(1983)
A KORSZERŰ BESZÉD-SZINTÉZIS ALAPELVE
A BESZÉDSZINTÉZIS EREDMÉNYEI
Jól érthető, azonnal megszólaltatható folyamatos beszéd.
A FELHASZNÁLÁS LEHETŐSÉGEIBŐL:
• oktatás• beszédrehabilitáció• vakok számítógép-használata• internetes kommunikáció• távközlési szolgáltatások• ipari alkalmazások
A BESZÉDSZINTÉZIS A HALLÁS VIZSGÁLATÁBAN (1986–)
A beszédalapú hallásvizsgálat előnyei:
egyszerű, megbízható, gyors, gyermekek
szűrésére kiváló (8000 Hz-ig)
Természetes beszéddel nem megoldható,
a többletinformációk miatt
Megoldás:
célzottan fejlesztett mesterséges beszéd
A GOH BESZÉDHALLÁS-SZŰRŐ
A GOH-KÉSZÜLÉK
A GOH EREDMÉNYEI
• a hallás zavarának jelzése• információt ad a gyermek általános
beszédészleléséről• a szűrést védőnő, óvónő, logopédus,
tanító végezheti• 3-10 éves gyerekek tömeges
szűrésének lehetősége• az országban több ezer készüléket
használnak
A HALLÁSRA ÉPÜLŐ ÉSZLELÉSI FOLYAMATOK
FONOLÓGIAI SZINT
FONETIKAI SZINT
AKUSZTIKAI SZINT
hallástárolás
tárolás
tárolás
tárolás
ÉSZLELÉS, MEGÉRTÉS
FUNKCIÓI:
• a beszéd értése • tiszta kiejtés• szókincsbővülés• olvasástanulás• írástanulás• helyesírás• összes tanulási
folyamat
GMP
Beszédészlelési és beszédmegértési diagnosztika
3-12 éveseknek
KÉSŐN BESZÉLNI KEZDŐK
20
30
40
50
60
70
80
90
100
akusztikaiészlelés
fonetikaiészlelés
szeriálisészlelés
fonológiaiészlelés
7 év 9 év 10 év%
elvárt
OLVASÁSI NEHÉZSÉGGEL KÜZDŐK
0102030405060708090
100
akusztikaiészlelés
fonológiaiészlelés
szeriálisészlelés
8 ÉVESEK 9 ÉVESEK 10 ÉVESEK%
elvárt
ÉSZLELÉSI TELJESÍTMÉNY EGYOLDALI NAGYOTHALLÁS
ESETÉN
0
10
20
30
40
50
60
70
80
90
100
ENYHE HALLÁSZAVAR SÚLYOS HALLÁSZAVAR
BESZÉDÉSZLELÉSI SZINT%
elvárt
AZ AJAKARTIKULÁCIÓ KÍSÉRLETI VIZSGÁLATÁNAK
KEZDETEI
Otto Jespersen: 1904
PHANTOPHON: SIKETEK BESZÉDTANÍTÁSÁHOZ (1934)
HALLÁSSÉRÜLTEK KORSZERŰ BESZÉDTANÍTÁSA
HALLÁSSÉRÜLTEK BESZÉD-TANÍTÁSÁNAK EREDMÉNYEI
0
5
10
15
20
25
30
35
hagyományos módszerrel beszédkorrektorral
%
19. SZÁZAD: A BESZÉD RÖGZÍTÉSÉNEK KEZDETEI
Edison első fonográfja
20. SZÁZAD: A BESZÉLŐ AZONOSÍTÁSA A RÖGZÍTETT BESZÉDE ALAPJÁN
UJJLENYOMAT – HANGLENYOMAT?
A TUDOMÁNYOS KÉRDÉS:• A beszéd oly mértékben jellemző az
emberre, hogy a beszéde alapján azonosítható a beszélő személy?
ÁLTALÁNOS VÁLASZ:• Miért ne lenne? Felismerjük
barátainkat, ismerőseinket, például telefonon át is...
ÉRDEKE AZ AZONOSÍTÁS BIZTONSÁGI RENDSZEREK,
LABORATÓRIUMOK, EGYES MUNKAHELYEK STB.
INFORMÁCIÓKÉRÉS: BANKSZÁMLÁK, TELEFONSZÁMOK, ADATSZOLGÁLTATÁS STB.
NEM ÉRDEKE AZ AZONOSÍTÁS BŰNÜGYEK
A BESZÉLŐ VISZONYULÁSA SZEMÉLYÉNEK
AZONOSÍTÁSÁHOZ
A BESZÉLŐ SZEMÉLYAZONOSÍTÁSÁNAK
PROBLÉMÁJA
A beszéd akusztikai szerkezete beszélőnként változik:
„ún. beszélők közötti különbségek”.
Ugyanazon beszélő esetében is változik a helyzettől függően:
„egy beszélőn belüli különbségek”.
HÁNY BESZÉLŐ BESZÉDÉRŐL KÉSZÜLTEK AZ ÁBRÁK?
Egy beszélő vagy Egy beszélő vagy
kettő? kettő?
A BESZÉD FONETIKAI VIZSGÁLATA BESZÉLŐAZONOSÍTÁSKOR
• Beszédhangok összevetése
• Beszéddallam, hangsúly, beszédtempó,
szünetek
• Megakadásjelenségek
• Egyéni artikulációs sajátosságok
Műszeres és szubjektív elemzések
A BESZÉLŐAZONOSÍTÁS LEHETSÉGES EREDMÉNYEI
= AZONOS
~ NAGY VALÓSZÍNŰSÉGGEL AZONOS
? AZ AZONOSSÁG NEM BIZONYÍTOTT, DE NEM KIZÁRHATÓ
≠ AZ AZONOSSÁG KIZÁRHATÓ
AZ AZONOSÍTÁS ELVÉGZÉSE LEHETETLEN
A JÖVŐ HÁROM MONDATBAN
1. BESZÉDÜNK TITKAI CSAKNEM VÉGTELENEK...
2. A BESZÉDTECHNOLÓGIA MIND TÖBB ISMERETET NYÚJT A GYAKORLATNAK.
3. A KUTATÁSI EREDMÉNYEK ALKALMAZÁSAI SZINTE KORLÁTLANOK...
KÖSZÖNÖM A FIGYELMÜKET!