49
Kognitív Tudományi Tanszék www.cogsci.bme.hu Budapesti Műszaki és Gazdaságtudományi Egyetem Adattömörítés az elsődleges látókéregben Kovács Ilona [email protected] BME GTK Kognitív Tudományi Tanszék www.cogsci.bme.hu

Adattömörítés az elsődleges látókéregben

  • Upload
    elata

  • View
    45

  • Download
    4

Embed Size (px)

DESCRIPTION

Adattömörítés az elsődleges látókéregben. Kovács Ilona ikovacs @ cogsci .bme.hu BME GTK Kognitív Tudományi Tanszék www.cogsci.bme.hu. A kognitív tudomány mint átfedési terület. Célja : a “ természetes intelligencia ” m egértése - PowerPoint PPT Presentation

Citation preview

Page 1: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Adattömörítés az elsődleges látókéregben

Kovács [email protected] BME GTK Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Page 2: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

A kognitív tudomány mint átfedési terület

Célja: a “természetes intelligencia” megértése

• Hogy működik az érzékelés, felismerés, kategorizáció, emlékezet, érvelés, probléma megoldás, cselekvésirányitás, beszéd, kommunikáció?

Módszere: multidiszciplináris Közös problémák, nem hagyományos diszciplinák

Page 3: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

• Nyelvi megértés folyamatai embernél

• Emberi magasabb szintű látás és fejlődése

• Kategorizáció, ezen belül az arcok

• Megismerés fejlődése és fejlődési zavarai: genetikai zavarok és megismerés

A BME Gazdaság és Társadalomtudományi Karán 2004 júliusában alakult a Kognitiv Tudományi Tanszék

Page 4: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

A megismerés fejlődési zavarai

- Lukács Ágnes, Kovács Ilona, Racsmány Mihály és Pléh Csaba -

• Kutatások egy ritka (1:25.000) zavar, a Williams szindróma kognitív profiljával kapcsolatban.• Igen erős téri zavar, élénk kommunikáció, jó szociabilitás• Gének és viselkedés közötti hidat az anatómia teremti meg• MRI vizsgálatok mutatják meg a kontroll és WS halánték lebeny közötti különbséget.• Pszichofizikai vizsgálatok tárják fel a primér vizuális funkciókat.• Az agyi plaszticitás vizsgálata, alvás és tanulás, az alvás mikromintázata.

Kontroll

Williams Szindróma

Page 5: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Könyveink

Page 6: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Sharon, E. et al. Hierarchy and adaptivity in segmenting scencesNature 2006, 442/17, 810-14.

A szegmentáció problémája még mindig nehéz

1. Hasonló és mégis különálló

Page 7: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Sharon, E. et al. Hierarchy and adaptivity in segmenting scencesNature 2006, 442/17, 810-14.

A szegmentáció problémája még mindig nehéz

2. Különböző és mégis összetartozik

Page 8: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Az információfeldolgozó paradigma modellje szerint:

a kognitív folyamatok

Page 9: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Page 10: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Adattömörítés az elsődleges látókéregben

Kovács IlonaBME GTK Kognitív Tudományi Tanszék

[email protected]

Page 11: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

• Frontális (homlok)

• Temporális (halánték)

• Parietális (fali)

• Occipitális (nyakszirti)

Agykéreg: 4 lebeny

Page 12: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Funkcionális specializáció

• Motoros• Szenzoros

– Szagló– Ízlelő– Szomatoszenzoros– Halló– Látó

• „Asszociációs”

Page 13: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Dorzális pálya (occipito-parietális): a tárgyak manipulálása, akadályok elkerülése AKCIÓ

Ventrális pálya (occipito-temporális): a tárgyak maradandó tulajdonságai tudatos percepció PERCEPCIÓ

Goodale és Milner, 1992

A látás agykérgi szerveződése egyszerűnek tűnik…

Page 14: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

…de igazából…

Page 15: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Elsődleges látókéreg (V1)a látási ingerek fő adatelemzője az agyban

LOKÁLISinput elemzés:• luminencia• diszparitás• mozgás • szin• orientáció

…jobb lesz tehát az elején kezdeni…

Page 16: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

LOKÁLISinput elemzés:• luminencia• diszparitás• mozgás • szin• orientáció

Csakhogy…

Page 17: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

funkcionális anatómiai adatok: szerveződés

• a látókéreg sejtjei hosszú (1-2 mm) horizontális axonokkal vannak összekötve (pl: Rockland & Lund,1983; Gilbert & Wiesel, 1983, 1989)

• hasonló hangolású sejtek vannak egymással összekötve: INTEGRÁCIÓ? (pl. Blasdel et al; Malach et al, 1993 ))

Page 18: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Kontúr-integrációs paradigma: kontúr + zaj

Kovács és mtsi, 1993-

Page 19: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Page 20: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

• téri frekvencia

• végződés

• távolság

• V1 interakciók vizsgálatára

szűk sávban van

nincs

középpontok között

alkalmas

széles sávban van

van: illuzórikus kontúr

nem definiált

alkalmatlan

Page 21: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

D > 1 D < 1

D = zajelemek távolsága / kontúrelemek távolsága

Page 22: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

H.J.A. esete (Humphreys and Riddoch, 1984, 1987b; Riddoch and Humphreys, 1987a)• agyvérzés hátsó kérgi területeken

• vizuális agnózia• prozopagnózia• alexia agraphia nélkül• kérgi szinvakság• téri orientációs zavarok

• kontúr-teszt:

normál teljesitmény

V1 elégséges

MRI (1989) : kétoldali léziók az inferior temporális, oldalsó occipitotemporális, fusiform és lingualis gyrusokban (Riddoch et al, Brain, 122, 3, 1999)

Page 23: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

0.6 0.65 0.7 0.75 0.8 0.85 0.9

Kontúr integráció gyermek- és felnőttkorban

• lassú fejlődés • 510 gyerek, 60 felnőtt

5-6 yr6-7 yr

9-10 yr10-11 yr

13-14 yr

19-30 yr

D

Page 24: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

0.6 0.65 0.7 0.75 0.8 0.85 0.9Kontúr integráció ambliópia esetén

(ambliópia: agykérgi eredetű gyenge látás az egyik szem korai rendellenes ingerlése következtében)

S Amb

S Amb jó

S jobb

S bal

E jobb

E bal

D

Page 25: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Williams Szindróma Kontroll

nyakszirti lebeny

kisagy

Reiss et al, J Cog Neurosci volume 12 Suppl 1

Page 26: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Kontúr integráció Williams Szindróma esetén

• gyenge kontúr integráció

0.6 0.65 0.7 0.75 0.8 0.85 0.9

6 yr7 yr

10 yr

11 yr

14 yr

30 yr

Page 27: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Kontúr-integrációs pardigma: kontúr + zaj

Kovács és mtsi, 1993-

Page 28: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

elsődleges látókéreg (V1) szerepe Agnóziás beteg Giersch, Humphreys, Kovacs & Boucart

Cog Neuropsych, 17: (8) 2000

lassú fejlődés 5-14 évesek Kovács, Kozma, Benedek, PNAS 1999

normális vizuális input szükséges Ambliópia Kovács et al, Vision Res, 40(13) 2000

Chandna et al, Inv Opth. Mar;42(3) 2001

genetikusan meghatározott WMS Kovács, Lukács, Racsmány, Pléh, 2001

alvásfüggő tanulás felnőtteknél Kovács, Kozma, Gerván, 2006

Page 29: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

frame 1

Lokális kontrasztérzékenység

frame 2

targetClosed contour

Page 30: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Érzékenységi térképek

Pszichofizikai

Kovacs and Julesz, 1993, 1994

Neurális Lee, Mumford, Schiller, 1995

Page 31: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

log units

Érzékenység változás

Érzékenységi térkép:

a kontrasztérzékenységváltozása egy zártalakzaton belül

Kovács és Julesz, Nature, 1994

Page 32: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Tengely alapú reprezentáció

• “pálcikafigura”

• H. J. Blum, 1967, futótűz algoritmus

Page 33: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

D függvény:

tetszés szerinti alakzat tengely alapú reprezentációját adja

Kovács és mtsi, Vision Research, 1997

Page 34: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Page 35: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Page 36: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Page 37: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

D függvény:

tetszés szerinti alakzat tengely alapú reprezentációját adja

Kovács és mtsi, Vision Research, 1997

Page 38: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

- a biológiai mozgás feldolgozá- sához szükséges reprezentáció

- optimalizálja a téri-idői felbontást

- csökkenti a téri információ redundanciáját

- hallatlan mértékű tömöritést végez

Page 39: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Elsődleges látókéreg(V1 és szomszédai)

Specializálódott agyi területek(temporális kéreg)

Page 40: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Elsődleges látókéreg (V1)a látási ingerek fő adatelemzője az agyban

LOKÁLISinput elemzés:• luminencia• diszparitás• mozgás • szin• orientáció

…jobb lesz tehát az elején kezdeni…

TÖMÖRÍTÉS

Page 41: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Dorzális pálya (occipito-parietális): a tárgyak manipulálása, akadályok elkerülése AKCIÓ

Ventrális pálya (occipito-temporális): a tárgyak maradandó tulajdonságai tudatos percepció PERCEPCIÓ

Goodale és Milner, 1992

A látás agykérgi szerveződése egyszerűnek tűnik…

Page 42: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

…de igazából…

Page 43: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

…hogyan tovább?…

Page 44: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Biológiai formák gyors felismerése, képtömörités - pl. videokonferencia,robotirányitás

Page 45: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

számitógépes animációvideofilmek videojátékok

Page 46: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Sharon, E. et al. Hierarchy and adaptivity in segmenting scencesNature 2006, 442/17, 810-14.

A szegmentáció problémája még mindig nehéz

1. Hasonló és mégis különálló

Page 47: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

…hogyan tovább?…

• Hogyan lehet vizsgálni a V1 – IT „feedback” kapcsolatot?• Mi lehet a „top-down” kód?

Page 48: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem

Page 49: Adattömörítés az elsődleges látókéregben

Kognitív Tudományi Tanszékwww.cogsci.bme.hu

Budapesti Műszaki és Gazdaságtudományi Egyetem