15
A számítógépes nyelvészet elmélete és gyakorlata Tóth Enikő [email protected] http://lingua.arts.unideb.hu fogadóóra: szerda, 9-10, 417.

A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

  • Upload
    others

  • View
    2

  • Download
    0

Embed Size (px)

Citation preview

Page 1: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

A számítógépes nyelvészet elmélete és gyakorlata

Tóth Enikő

[email protected]

http://lingua.arts.unideb.hu

fogadóóra: szerda, 9-10, 417.

Page 2: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Tematika

Bevezetés

A nyelv és a számítógép, történeti betekintés

Természetesnyelvi jelenségek – problémák a gépi feldolgozás számára

Formális nyelvek elmélete

Korpuszok

Különböző alkalmazások (Szekrényes István)

- Logikai programozás (Prolog)

- Beszédfeldolgozás (Praat)

- Reguláris kifejezések használata

A magyar nyelvre vonatkozó eredmények

Page 3: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Irodalom

Futó Iván (ed): Mesterséges intelligencia. Aula Kiadó, Budapest, 1999

Prószéky Gábor: Számítógépes nyelvészet. Számítástechnika-Alkalmazás Vállalat, Budapest, 1989

Prószéky Gábor – Kis Balázs: Számítógéppel emberi nyelven. Szak Kiadó, Budapest, 1999

Prószéky Gábor: A nyelvtechnológia (és) alkalmazásai. Budapest, Aranykönyv Kiadó, 2005

Bach Iván: Formális nyelvek. Typotex, Budapest, 2001

Mitkov, Ruslan (ed): The Oxford handbook of computational linguistics. OUP, 2004

http://szamitogepesnyelveszet.blogspot.hu/

http://www.mestersegesintelligencia.hu/

Page 4: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Irodalom:

Kis Balázs, Prószéky Gábor: A nyelv és a számítógép.

In: Kenesei István (ed): A nyelv és a nyelvek. Budapest, Akadémiai Kiadó, 2011

Babarczy Anna: Számítógépes nyelvészet.

In: Kovács Ilona & Szamarasz Vera Zoé (eds): Látás, nyelv, emlékezet. Budapest, Typotex, 2006

Prószéky – Olaszy – Váradi: Nyelvtechnológia

In: Kiefer Ferenc (ed): Magyar nyelv. Budapest, Akadémiai Kiadó, 2006

Page 5: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Bevezetés

számítógépes nyelvészet – nyelvtechnológia:

- műszaki tudomány, mely természetes nyelvű szövegek számítógépes feldolgozásával foglalkozik, az informatika hívta létre

- interdiszciplináris: informatika, matematika (formális nyelvek, automataelmélet, statisztika, halmazelmélet, stb.), nyelvészet

Page 6: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Történeti betekintés

Alan Turing 1950: a Turing teszt (gondolatkísérlet)

gépi fordítás/kódolás igénye – mesterséges intelligencia

60-as évek: a számítógépes fordítás

1. sokkal lassabb,

2. sokkal drágább,

3. sokkal rosszabb, mint a humán fordítás

a fejlődés megtorpan

Page 7: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Történeti betekintés

ELIZA ( J. Weizenbaum) 1966: pszicoterapeuta szimulálása

- A férfiak mind egyformák.

- Ezt hogy érted?

- Mindig nyaggatnak minket valamiért.

- Mondanál egy konkrét példát?

- Hát, a pasim küldött ide.

- A pasid küldött ide.

- Azt mondja, mindig depressziós vagyok.

- Sajnálom, hogy depressziós vagy.

- Talán ki kellene békülnöm az anyámmal.

- Mesélj még a családodról.

Page 8: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Történeti betekintés

hogyan működik?

– kulcsszó keresés: mindig, anyám

– kulcsszó aktivál egy szabályt: Mondanál egy konkrét példát? Mesélj még a családodról.

– reguláris kifejezések segítségével behelyettesítés a szabálynak megfelelően:

pasim -> pasid

reguláris kifejezés: egy olyan, bizonyos szintaktikai szabályok szerint leírt jelsorozat amivel meghatározható jelsorozatok egy halmaza.

– kulcsszavak rangsorolva vannak

http://psych.fullerton.edu/mbirnbaum/psych101/Eliza.htm

Page 9: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Történeti betekintés

Roger Schank (70-es évek) script rendszerek (forgatókönyv rendszerek)

Egy ember bement egy étterembe és rendelt egy hamburgert. Amikor a hamburger megérkezett, meg volt elégedve vele és amikor távozott, kifizette a számlát és sok borravalót hagyott.

Kérdés: Megette az ember a hamburgert?

Válasz: (Valószínűleg) igen.

„forgatókönyvek” élethelyzetekről

tipikus események részletes leírása: pl. étterem forgatókönyv:

– bemegyünk az étterembe

– a ruhatárban letesszük a kabátot

– kiválasztunk egy asztalt, stb.

Page 10: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Mai célok

Írott vagy beszélt nyelvi jelek automatikus gépi feldolgozása illetve produkciója

Feldolgozás:

– Ingerérzékelés (írott karakter, beszédhang, kézjelek)

– Elemzés

– Megértés

Produkció:

– Gondolat (mentális reprezentáció)

– Kódolás

- Megjelenítés

Page 11: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Egy példa – Herme (N. Campbell)

Page 12: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Herme és Him

Page 13: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Herme

Page 14: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Hivatkozások

Campbell, N.: “Hello?, Hi!”, managing contact. Talk presented at Interdisciplinary Workshop on Linguistic Annotation and Interaction Knowledge Systems, France, May 23-25th 2011

Babarczy Anna: Számítógépes nyelvészet.

In: Kovács Ilona & Szamarasz Vera Zoé (eds): Látás, nyelv, emlékezet. Budapest, Typotex, 2006

Page 15: A számítógépes nyelvészet elmélete és gyakorlatalingua.arts.unideb.hu/doc/sznyelveszet_1.pdf · A nyelv és a számítógép, történeti betekintés Természetesnyelvi jelenségek

Köszönöm a figyelmet!