63
RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Embed Size (px)

Citation preview

Page 1: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

RICERCA VISIVA (VISUAL SEARCH)

Tiziana GianesiniDip. Di Scienze neurologiche e della VisioneSezione Fisiologia UmanaSt.da le Grazie, 8Verona

Page 2: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 3: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 4: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 5: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 6: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 7: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 8: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 9: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 10: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

X

X

X

X

O X

O

O O O

O

X

X

XX

O O

X

Page 11: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Esperimento di ricerca visiva ideale

Numero dei distrattori

TR

Page 12: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 13: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 14: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 15: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 16: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 17: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 18: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Di che natura sono i processi sottostanti i meccanismi della ricerca visiva?

-Treisman & Gelade, 1980

- Wolfe & Cave., 1989

-Duncan & Humphreys, 1989

Page 19: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Visual search: (Treisman & Gelade, 1980)

Facile - il target è definito da una caratteristica (feature) diversa (ricerca “parallela”)

XX

X

X

X X

X

X

X

X

X

X

X

X

X

X

X

X

O X

O

O O O

O

X

X

Più difficile - una congiunzione (conjunction) di caratteristiche definisce il target ( ricerca “seriale”)

Page 20: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Feature Integration Theory (FIT)

• Caratteristiche di base (Basic features) come il colore, l’orientamento, la curvatura, il movimento, ecc., sono estratti in parallelo attraverso la scena visiva.

• Combinare queste features in un oggetto richiede che l’attenzione si focalizzi sulla posizione occupata dall’oggetto.

• L’attenzione può essere focalizzata solo su una posizione alla volta, serialmente.

• Un compito di ricerca visiva può essere dicotomizzato in preattentivo e seriale

• il rapporto presente-assente della pendenza (slope-ratio) è di 2:1

Page 21: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 22: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Ricerca inefficiente vs ricerca efficiente

• Le pendenze date dai compiti di ricerca sfortunatamente non sono separate così nettamente

0

200

400

600

800

1000

1200

1400

4 8 12 16 20

Parallelo-presenteSeriale-presenteSeriale-assenteParallelo-assente

Page 23: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Ovviamente non è così semplice...

Alcuni compiti di conjunction sono facili - Theeuwes and Kooi (1994) - ( es. profondità e forma, movimento e forma)

X

XX

X

O X

O

O OO

O

X

X

Page 24: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Guided Search - Wolfe & Cave

• molte ricerche di congiunzione sono abbastanza efficienti

• Compiti di conjunctions tripli sono spesso più facili che compiti di conjunctions doppi

• Questo ha portato Wolfe and Cave a formulare il “Guided search model”

• Il Guided search model è una modifica del FIT

Page 25: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Guided Search - Wolfe & Cave

• Processi separati cercano delle X e degli oggetti bianchi (essendo la feature del target) e c’è una corrispondente doppia attivazione in un’area cerebrale che guida l’attenzione al target.

X

XX

X

O X

O

O OO

O

X

X

Page 26: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Problemi per entrambe queste teorie(FIT & GS)

• Il FIT e il Guided Search assumono che l’attenzione è diretta ad una posizione e non agli oggetti presenti in una scena visiva.

• Goldsmith (1998) ha mostrato un search più efficiente quando due caratteristiche (rosso e S) sono combinate insieme (in un “oggetto”) rispetto a quando non lo sono.

Page 27: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Più problemi - Enns & Rensink (1991)

• La ricerca è più rapida in questa situazione solo quando gli oggetti sembrano 3D - può essere una “feature” la “direzione” indicata da un insieme di oggetti ?

Page 28: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Duncan & Humphreys (1989)

• Hanno osservato che i compiti di ricerca visiva sono facili quando:– I distrattori sono omogenei e molto diversi dal

target

• E difficili quando:– I distrattori sono eterogenei e non molto

diversi dal target

• Capire cosa significa attualmente similarità,potrebbe aiutare a creare una nuova teoria del visual search

Page 29: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Asimmetrie nella ricerca visiva

• Rilevare la presenza di una caratteristica è più facile che rilevarne l’assenza

Vs

Vs

Page 30: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Kristjansson & Tse (2001)

• Rilevare la presenza è più facile che rilevare l’assenza - ma qual è la “feature”?

Trova il “bump” Trova l’”un-bump”

Page 31: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Familiarità e asimmetria• E’ più facile trovare un target non familiare

in mezzo a distrattori familiari che viceversa

Page 32: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Familiarità e asimmetria

• E’ possibile che molte asimmetrie siano dovute alla familiarità

• Importante: è la familiarità con i distrattori che fa la ricerca più efficiente, non con il target.

• Questo fornisce suggerimenti su come il search lavora….

Page 33: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Altri effetti di familiarità?• Wolfe ha mostrato

che è più facile trovare elefanti morti che trovare elefanti vivi

• è più facile trovare facce orientate canonicamente che trovare facce ruotate di 180° (Burke et al, 2003)

Page 34: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Di che cosa è alla ricerca la ricerca visiva?

• Se proprietà di alto livello come la direzionalità data da oggetti 3D produce un search efficiente

• E la familiarità di una lettera può produrre un search efficiente

• In che senso un search efficiente è un feature search?– E questo cosa implica riguardo l’evidenza di

effetti di “basso livello” nella ricerca visiva?

Page 35: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Altri effetti di “alto livello”

• Wolfe (1996) ha mostrato che una linea nera orientata non è influenzata dalla grata bianca - quindi una “feature” search non è sensibile all’occlusione.

Verticale nera

Verticale nera

Nera non verticale

Page 36: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Rensink & Enns (1995a)• Hanno mostrato che la ricerca della lunghezza di

una linea è influenzata dall’illusione di Muller-Lyer

Rensink & Enns (1995b)Hanno mostrato che la ricerca della lunghezza di una linea non è influenzata

dall’ occlusione

Page 37: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

La trasparenza influenza la ricerca - Mitsudo (2003)

• La ricerca di un rettangolo trasparente può essere molto efficiente

• Ancora, un search efficiente per una non-”feature”

Page 38: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

la ricerca visiva è “intelligente”?

• Gli studi precedenti suggeriscono che la ricerca visiva è in grado di prendere in considerazione i livelli alti dell’informazione percettiva– suggerendo che è “intelligente”

Page 39: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

la ricerca visiva ha memoria?

• Klein (1988); Gibson e al.(2000); Peterson e al.(2001): SI (MODELLI CON COMPONENTI SERIALI)

• Horowitz e Wolfe (1998): NO (MODELLI

CON COMPONENTI PARALLELE)

Page 40: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Inibizione di ritorno:

Una risposta motoria ad un target visivo presentato in una posizione precedentemente segnalata è facilitata se lo stimolo bersaglio (target) è presentato dopo un breve intervallo di tempo dopo la comparsa dell’indizio (cue) (es 100-200 ms), mentre è inibita se l’intervallo di tempo cue-target è maggiore. Quest’ultimo effetto viene chiamato inibizione di ritorno (‘inhibition of return’, IOR).

Page 41: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Klein (1988): INIBIZIONE DI RITORNO

Tempo

+

+

+

+

+

+

Esempio di prova valida

Page 42: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Risultato tipico in un paradigma di IOR

498

517

490

495

500

505

510

515

520

invalido valido

TR

-se lo stimolo bersaglio appare entro un intervallo di tempo breve (150 ms or meno), allora i TR sono più veloci.

-per intervalli più lunghi (da 200-300 ms fino a 1500 ms), i TR sono più lenti: il cosiddetto effetto di inibizione di ritorno.

Page 43: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Horowitz & Wolfe (1998) - La ricerca visiva non ha memoria

• Il tempo per trovare un target non è influenzato dagli item presenti nel display e che cambiano posizione casualmente ogni 100 ms.

• Questo dimostra che le posizioni non sono ricordate

Page 44: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

Wolfe et al (2002) - forse l’attenzione è necessaria per

combinare le features insieme

• Target = scrambled chicken

• la disintegrazione mascherata dal movimento dei piedi

Page 45: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

A cosa serve l’attenzione?• Il fatto che gli oggetti “scrambled” non producono

pop-out rispetto agli oggetti “unscrambled” è stato usato come evidenza che l’attenzione è necessaria per combinare le feature insieme(FIT di Treisman)

• Da allora se l'attenzione è spostata via da un oggetto e questo oggetto viene modificato, non lo notate! (change blindness?)

• Ma una possibile alternativa è che l’attenzione sia necessaria per vedere ogni cosa (scrambled o no)

Page 46: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

_|

Page 47: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

_ |

Page 48: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 49: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 50: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 51: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 52: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

B

C

2 4 6 8

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%)

1000

2000

3000LC

RT

(m

sec)

2 4 6 8

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%) 500

1000

1500

2000n. 3 subjects

RT

(m

sec)

Best Fitting (Linear Regression)

Target present: Y =87 X +496, r2 =0.99

Target absent: Y =192 X +320, r2 =0.99

Page 53: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

B

C D

1 2 3 4 5 6 7 8 0

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%) 500

1000

1500

2000

2500LC

RT

(m

sec)

1 2 3 4 5 6 7 8 0

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%) 500

1000

1500

2000n. 3 subjects

RT

(m

sec)

Y =101 X +621, r2 =0.99

1 2 3 4 5 6 7 8 0500

1000

1500

2000

Pe

rce

nt

Co

rre

ct (

%)

Number of items

Page 54: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

B

C D

2 4 6 8

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%)

1000

2000

3000

n. 3 subjects

RT

(m

sec)

1 2 3 4 5 6 7 8 0

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%)

1000

2000

3000

n. 3 subjects

RT

(m

sec)

1 2 3 4 5 6 7 8 0500

1000

1500

2000

2500

3000

3500

Pe

rce

nt

Co

rre

ct (

%)

Number of items

Best Fitting (Linear Regression)

Target Present: Y =145 X +382; r2 =0.99

Target Absent: Y =294 X +239; r2 =0.99

Position Effect: Y =232 X +388; r2 =0.99

Page 55: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona

B

C D

2 4 6 8

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%) 0

500

1000n. 3 subjects

RT

(m

sec)

1 2 3 4 5 6 7 8 0

60

80

100

Number of itemsPe

rce

nt

Co

rre

ct (

%) 0

500

1000n. 3 subjects

RT

(m

sec)

Best Fitting (Linear Regression)

Target present: Y =5 X +462; r2 =1

Target absent: Y =4 X +480; r2 =0.77

Position Effect: Y =8 X +439; r2 =0.75

Page 56: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 57: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 58: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 59: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 60: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 61: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 62: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona
Page 63: RICERCA VISIVA (VISUAL SEARCH) Tiziana Gianesini Dip. Di Scienze neurologiche e della Visione Sezione Fisiologia Umana St.da le Grazie, 8 Verona