A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG

A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG

Gósy Mária

MTA Nyelvtudományi Intézet,

Kempelen Farkas Beszédkutató Laboratórium

A FONETIKA TÖRTÉNETÉBŐL

Az első teljes magyar hangtan:

Bél Mátyás (1718) munkája,terjedelme: 7 oldal!

Bél Mátyás „modern” megállapításai:• a hangokat másként ejtjük a szó különböző

helyein;• a hangoknak stilisztikai sajátosságuk van;• némely mássalhangzónk összetett;• a kiejtés számos tényező függvénye.

A FONETIKA TÖBB TUDOMÁNY HATÁRTERÜLETÉN

Agykutatás

Neurolingvisztika

Pszicholingvisztika

Neurológia

Pszichológia

Fizikai akusztika

Nyelvtudomány

FONETIKA

Fül-orr-gégészet

Foniátria

Audiológia

Pszichoakusztika

Fonológia

Agykutatás

Neurolingvisztika

Pszicholingvisztika

Neurológia

Pszichológia

Fizikai akusztika

Nyelvtudomány

FONETIKA

Fül-orr-gégészet

Foniátria

Audiológia

Pszichoakusztika

Fonológia

A BESZÉD

KÉT ALAPKÉRDÉS

1. MI A KAPCSOLAT A FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT?

2. MI A KAPCSOLAT AZ ALKALMAZOTT FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT?

BESZÉD

fonológia

fonetika

beszédtechnológia

alkalmazottfonetika

beszédtechnikabeszédzavarok

beszéd-hallás

beszélő felismerése

FELHASZ-NÁLÁS

digitális jel-feldolgozás

beszéd-szintézis

beszédfelismerés

zajtisztításbeszélőazonosítás

(verifikálás)

FONETIKA, BESZÉDTECHNOLÓGIA, ALKALMAZÁSOK

fonetika

beszédtechnológia

alkalmazottfonetika

beszéd-hallás

beszélő felismerése

beszéd-szintézis

A MAGYAR BESZÉD-TECHNOLÓGIA KEZDETEI

• az első működő beszélőgép:

Kempelen Farkas (1791)

• kísérlet magánhangzók mesterséges felismerésére: Tarnóczy (1950-es évek)

• Kossuth hangjának „megtisztítása”

• analóg beszédjel digitális átalakítása:

az első számítógépek

MAGÁNHANGZÓK HANGSZÍNKÉPEI

á a o ü e ö i u o a á i é e ü ö

Bal oldalon: Kempelen gépének hangjai

Jobb oldalon: ember ejtette hangok

Egy magyar napilap Egy magyar napilap Tudomány és technika Tudomány és technika rovata hírt ad rovata hírt ad angol és német mérnökök angol és német mérnökök mesterségesbeszéd-előállításárólmesterségesbeszéd-előállításáról

rajzolt rezgésképből beszédrajzolt rezgésképből beszéd

„HANGFANTÓMOK”: 1939

HANGELEMEK „FESTÉSE” A MEGSZÓLALTATÁSHOZ

AZ ELSŐ MAGYARFORMÁNS-SZINTETIZÁTOR

(1983)

A KORSZERŰ BESZÉD-SZINTÉZIS ALAPELVE

A BESZÉDSZINTÉZIS EREDMÉNYEI

Jól érthető, azonnal megszólaltatható folyamatos beszéd.

A FELHASZNÁLÁS LEHETŐSÉGEIBŐL:

• oktatás• beszédrehabilitáció• vakok számítógép-használata• internetes kommunikáció• távközlési szolgáltatások• ipari alkalmazások

A BESZÉDSZINTÉZIS A HALLÁS VIZSGÁLATÁBAN (1986–)

A beszédalapú hallásvizsgálat előnyei:

egyszerű, megbízható, gyors, gyermekek

szűrésére kiváló (8000 Hz-ig)

Természetes beszéddel nem megoldható,

a többletinformációk miatt

Megoldás:

célzottan fejlesztett mesterséges beszéd

A GOH BESZÉDHALLÁS-SZŰRŐ

A GOH-KÉSZÜLÉK

A GOH EREDMÉNYEI

• a hallás zavarának jelzése• információt ad a gyermek általános

beszédészleléséről• a szűrést védőnő, óvónő, logopédus,

tanító végezheti• 3-10 éves gyerekek tömeges

szűrésének lehetősége• az országban több ezer készüléket

használnak

A HALLÁSRA ÉPÜLŐ ÉSZLELÉSI FOLYAMATOK

FONOLÓGIAI SZINT

FONETIKAI SZINT

AKUSZTIKAI SZINT

hallástárolás

tárolás

tárolás

tárolás

ÉSZLELÉS, MEGÉRTÉS

FUNKCIÓI:

• a beszéd értése • tiszta kiejtés• szókincsbővülés• olvasástanulás• írástanulás• helyesírás• összes tanulási

folyamat

GMP

Beszédészlelési és beszédmegértési diagnosztika

3-12 éveseknek

KÉSŐN BESZÉLNI KEZDŐK

20

30

40

50

60

70

80

90

100

akusztikaiészlelés

fonetikaiészlelés

szeriálisészlelés

fonológiaiészlelés

7 év 9 év 10 év%

elvárt

OLVASÁSI NEHÉZSÉGGEL KÜZDŐK

0102030405060708090

100

akusztikaiészlelés

fonológiaiészlelés

szeriálisészlelés

8 ÉVESEK 9 ÉVESEK 10 ÉVESEK%

elvárt

ÉSZLELÉSI TELJESÍTMÉNY EGYOLDALI NAGYOTHALLÁS

ESETÉN

0

10

20

30

40

50

60

70

80

90

100

ENYHE HALLÁSZAVAR SÚLYOS HALLÁSZAVAR

BESZÉDÉSZLELÉSI SZINT%

elvárt

AZ AJAKARTIKULÁCIÓ KÍSÉRLETI VIZSGÁLATÁNAK

KEZDETEI

Otto Jespersen: 1904

PHANTOPHON: SIKETEK BESZÉDTANÍTÁSÁHOZ (1934)

HALLÁSSÉRÜLTEK KORSZERŰ BESZÉDTANÍTÁSA

HALLÁSSÉRÜLTEK BESZÉD-TANÍTÁSÁNAK EREDMÉNYEI

0

5

10

15

20

25

30

35

hagyományos módszerrel beszédkorrektorral

%

19. SZÁZAD: A BESZÉD RÖGZÍTÉSÉNEK KEZDETEI

Edison első fonográfja

20. SZÁZAD: A BESZÉLŐ AZONOSÍTÁSA A RÖGZÍTETT BESZÉDE ALAPJÁN

UJJLENYOMAT – HANGLENYOMAT?

A TUDOMÁNYOS KÉRDÉS:• A beszéd oly mértékben jellemző az

emberre, hogy a beszéde alapján azonosítható a beszélő személy?

ÁLTALÁNOS VÁLASZ:• Miért ne lenne? Felismerjük

barátainkat, ismerőseinket, például telefonon át is...

ÉRDEKE AZ AZONOSÍTÁS BIZTONSÁGI RENDSZEREK,

LABORATÓRIUMOK, EGYES MUNKAHELYEK STB.

INFORMÁCIÓKÉRÉS: BANKSZÁMLÁK, TELEFONSZÁMOK, ADATSZOLGÁLTATÁS STB.

NEM ÉRDEKE AZ AZONOSÍTÁS BŰNÜGYEK

A BESZÉLŐ VISZONYULÁSA SZEMÉLYÉNEK

AZONOSÍTÁSÁHOZ

A BESZÉLŐ SZEMÉLYAZONOSÍTÁSÁNAK

PROBLÉMÁJA

A beszéd akusztikai szerkezete beszélőnként változik:

„ún. beszélők közötti különbségek”.

Ugyanazon beszélő esetében is változik a helyzettől függően:

„egy beszélőn belüli különbségek”.

HÁNY BESZÉLŐ BESZÉDÉRŐL KÉSZÜLTEK AZ ÁBRÁK?

Egy beszélő vagy Egy beszélő vagy

kettő? kettő?

A BESZÉD FONETIKAI VIZSGÁLATA BESZÉLŐAZONOSÍTÁSKOR

• Beszédhangok összevetése

• Beszéddallam, hangsúly, beszédtempó,

szünetek

• Megakadásjelenségek

• Egyéni artikulációs sajátosságok

Műszeres és szubjektív elemzések

A BESZÉLŐAZONOSÍTÁS LEHETSÉGES EREDMÉNYEI

= AZONOS

~ NAGY VALÓSZÍNŰSÉGGEL AZONOS

? AZ AZONOSSÁG NEM BIZONYÍTOTT, DE NEM KIZÁRHATÓ

≠ AZ AZONOSSÁG KIZÁRHATÓ

AZ AZONOSÍTÁS ELVÉGZÉSE LEHETETLEN

A JÖVŐ HÁROM MONDATBAN

1. BESZÉDÜNK TITKAI CSAKNEM VÉGTELENEK...

2. A BESZÉDTECHNOLÓGIA MIND TÖBB ISMERETET NYÚJT A GYAKORLATNAK.

3. A KUTATÁSI EREDMÉNYEK ALKALMAZÁSAI SZINTE KORLÁTLANOK...

KÖSZÖNÖM A FIGYELMÜKET!