Tvorba a vyuzitı didaktickych testuCast materialu k prednaskam

Hana Vonkova

Univerzita Karlova v Praze - Pedagogicka fakulta

Vonkova Tvorba a vyuzitı didaktickych testu 1

Didakticky test - strucny popis postupu konstrukce I

nezacınat navrhovanım testovych uloh

zacınat promyslenım ucelu testu a dale stanovenım obsahutestu

pro uroven osvojenı poznatku je vhodne pouzıt Bloomovutaxonomii vyukovych cılu (znalost, pochopenı, aplikace,analyza, synteza a hodnocenı)

stanovıme casovy limit

dale lze pristoupit k formulaci jednotlivych uloh, pricemz jenutne mıt neustale na pameti, k jakemu ucelu ulohy slouzı ana zaklade toho vybırat i vhodny typ testovych uloh(otevrene, uzavrene atd.)

Vonkova Tvorba a vyuzitı didaktickych testu 2

Didakticky test - strucny popis postupu konstrukce II

test je vhodne nechat posoudit jinym hodnotitelem -posuzovanı obsahove validity

po sberu dat provedeme analyzu vlastnostı testovych uloha celeho testu (vypocet obtıznosti a citlivosti polozek,analyza nenormovanych odpovedı a reliability testu)

vyradıme ulohy, ktere nejsou vhodne (napr. zapornadiskriminacnı sıla)

pokud ma test s obsahove homogennımi ulohami nızkoureliabilitu, vysledky zaku zıskanych pomocı tohoto testunemuzeme povazovat za spolehlive a presne

nasledne lze provest standardizaci testu

Vonkova Tvorba a vyuzitı didaktickych testu 3

Didakticky test - testove ulohy I

Testove ulohy delıme dle zpusobu resenı (Chrastka, 2007)1 otevrene ulohy

otevrene siroke ulohyotevrene ulohy se strucnou odpovedı

2 uzavrene

dichotomickes vyberem odpovedi(ı)prirazovacıusporadacı

Vonkova Tvorba a vyuzitı didaktickych testu 4

Didakticky test - testove ulohy II

Otevrene siroke ulohy

od testovaneho vyzadujı rozsahlejsı odpoved’ (1/2 strany,ale i vıce)

Ktere byly hlavnı prıciny vzniku druhe svetove valky?Popiste cinnost jaderne elektrarny.

vhodne pro zkousenı komplexnıch vedomostı, vyssıch urovnıosvojenı uciva

doporucuje se vymezenı struktury pozadovane odpovedi prosnadnejsı vyhodnocovanı

vyhoda: snadno se navrhujı

nevyhoda: nemoznost objektivnıho skorovanı

Vonkova Tvorba a vyuzitı didaktickych testu 5

Didakticky test - testove ulohy III

Otevrene ulohy se strucnou odpovedı

od testovaneho vyzadujı vytvorenı vlastnı kratke odpovedi -napr. uvedenı urciteho slova, cısla, symbolu, vzorce,jednoducheho grafu, nekolik slov ci kratkych vet atp.

delıme je na:

produkcnı ulohyNapiste Archimeduv zakon.doplnovacı testove ulohyDne 6. cervence 1415 byl v Kostnici upalen kazatel. . .Muzi mlcel. . ., zeny hovoril. . ., deti se smal. . . a stenta sihral. . ..

vyhody: snadno se navrhujı a nejde snadno uhodnout spravnaodpoved’

Vonkova Tvorba a vyuzitı didaktickych testu 6

Didakticky test - testove ulohy IV

Dichotomicke ulohy

testovanym jsou predkladany dve alternativy odpovedi s tım,ze jedna je spravna

casto oznacovany jako true-false items

Jan Amos Komensky se narodil roku 1592. ano - nePri vyparovanı kapaliny se teplo spotrebovava - uvolnuje

vyhody: snadno se navrhujı a vyhodnocujı

nevyhody: casto testovanı pouze zapamatovanı (1. stupenBloomovy taxonomie), moznost uhodnutı spravne odpovedi je50ti procentnı

Vonkova Tvorba a vyuzitı didaktickych testu 7

Didakticky test - testove ulohy IV

Ulohy s vyberem odpovedı (prıklady dle Chrastka, 2007)testovany vybıra odpoved’ (odpovedi) z nekolika nabıdnutychalternativdelıme je na:

ulohy typu ”jedna spravna odpoved’”Cesta vlakem nam velmi rychle ubehla.Podtrzeny vetny clen je:A podmetB prısudekC predmetD prıslovecne urcenı

vyhody: relativne snadno se navrhujı, snadno se vyhodnocujı

nevyhody: v praxi casto testujı pouze zapamatovanı

Vonkova Tvorba a vyuzitı didaktickych testu 8

Didakticky test - testove ulohy V

ulohy typu ”jedna nejpresnejsı odpoved’”Ktere z nasledujıcıch tvrzenı nejlepe odpovıda na otazku “Coje chemicky prvek?”A Prvek je latka, ktera se sklada z atomu stejneho druhu.B Prvek je latka, kterou jiz dale nejde delit.C Prvek je latka slozena z atomu, ktere majı stejne protonovecıslo.D Zadne z predchozıch tvrzenı nenı spravne.

pro testovane obvykle byvajı obtızne

vyhody: snadne na vyhodnocovanı

nevyhody: casto je obtızne je zkonstruovat

Vonkova Tvorba a vyuzitı didaktickych testu 9

Didakticky test - testove ulohy VI

ulohy typu ”jedna nespravna odpoved’”

Ktery z nasledujıcıch deju nenı formou oxidacnıho procesu?A dychanıB hnitıC destilaceD rezivenı

vyhody: snadne na vyhodnocovanı

“nevyhody”: konstrukce distraktoru

Vonkova Tvorba a vyuzitı didaktickych testu 10

Didakticky test - testove ulohy VI

ulohy s vıcenasobnou odpovedı

Kterymi staty proteka reka Odra?A NemeckoB RuskoC Ceska republikaD SlovenskoE Polsko

nevyhody: mohou se objevit problemy pri skorovanı - lze zvolitnapr. metodu “vsechno nebo nic”

Vonkova Tvorba a vyuzitı didaktickych testu 11

Didakticky test - testove ulohy VI

situacnı ulohy

nabıdky nejsou predkladany ve forme seznamu, vyplyvajı zesituace

Na mısto oznacene hvezdickou napis cıslici, aby vyslednesesticiferne cıslo bylo delitelne sedmi:823*43

nepouzıvajı se casto

vyhody: snadne na vyhodnocovanı

Vonkova Tvorba a vyuzitı didaktickych testu 12

Didakticky test - testove ulohy VII

Korekce na hadanı spravnych odpovedı

so = sn −n

y − 1

,

so opravene skore

sn neopravene skore

n pocet nespravnych odpovedı

y pocet nabızenych odpovedı

doporucenı ohledne poctu nabızenych odpovedı: 4-5(mensı pravdepodobnost uhodnutı, unosny pocet pri konstrukci)

Vonkova Tvorba a vyuzitı didaktickych testu 13

Didakticky test - testove ulohy IX

Prirazovacı ulohy

ukolem testovaneho je priradit pojmy z jedne mnoziny kpojmum z mnoziny druhe

K nazvum statu v levem sloupci prirad’te nazvy hlavnıch mestz praveho sloupce.

Svycarsko A Dublin F RejkjavıkNorsko B Oslo G HelsinkyIsland C BonnNizozemsko D BernFinsko E Amsterdam

pocet nabızenych odpovedı v pravem sloupci je zamerne vetsı,aby zamezil ohodnutı spravneho prirazenı na zakladepredchozıch prirazenı

vyhody: omezujı moznost uhodnutı spravne odpovedi

nevyhody: vyuzitı jen v omezenem okruhu uciva

Vonkova Tvorba a vyuzitı didaktickych testu 14

Didakticky test - testove ulohy X

Usporadacı ulohy

ukolem testovaneho je seradit prvky do rady podle zadanehokriteria

Serad’te uvedena mesta podle poctu obyvatel. Serazenıproved’te pomocı poradovych cısel 1 az 6, aby mesto snejvetsım poctem obyvatel melo cıslo 1.Londyn . . .Tokio . . .Kahira . . .New York . . .Sao Paulo . . .Sydney . . .

nevyhoda: obtızne skorovanı

Vonkova Tvorba a vyuzitı didaktickych testu 15

Didakticky test - vlastnosti testovych uloh I

Obtıznost polozky - Hodnota obtıznosti polozky

Q = 100nn

N

nn je pocet zaku, kterı NEodpovedeli na polozku spravne

N celkovy pocet zaku

Obtıznost polozky - Index obtıznosti polozky

Q = 100ns

N

ns je pocet zaku, kterı odpovedeli na polozku spravne

N celkovy pocet zaku

Vonkova Tvorba a vyuzitı didaktickych testu 16

Didakticky test - vlastnosti testovych uloh II

Citlivost polozek - Koeficient ciltivosti ULI (upper-lowerindex)

d =nL − nH

0.5N

nL je pocet zaku z ”lepsı poloviny”, kterı odpovedeli napolozku spravne

nH je pocet zaku z ”horsı poloviny”, kterı odpovedeli napolozku spravne

N celkovy pocet zaku

pro hodnoty obtıznosti 30-70 se doporucuje, aby d bylo aspon0.25

pro hodnoty obtıznosti 20-30 a 70-80 se doporucuje, aby dbylo aspon 0.15

Vonkova Tvorba a vyuzitı didaktickych testu 17

Didakticky test - vlastnosti testovych uloh III

Analyza nenormovanych odpovedı = rozbor vynechanych nebonespravnych odpovedı

u otevrenych uloh venujeme pozornost tem, ve kterychvynechalo odpoved’ vıce nez 30-40% zaku, u uzavrenych ulohje to pak vıce nez 20%

u uloh uzavrenych s vyberem odpovedi zkontrolujemeatraktivnost distraktoru - zvazıme, zda-li nenahradımeneatraktivnı distraktor jinym distraktorem

u uzavrenych uloh rozdelıme nespravne odpovedi do dvoukategoriı - zakladnı chyby (zpusobene neznalostı uciva) avedlejsı chyby (zpuosbene nahodnymi vlivy), odstranımeulohy, kde prevazı vedlejsı chyby nad zakladnımi chybami

Vonkova Tvorba a vyuzitı didaktickych testu 18

Didakticky test - posouzenı vnitrnı konzistence testu

Reliabilita testu

didakticky test ma dobrou reliabilitu, pokud poskytujespolehlive a presne vysledky. Pokud bychom test neustaleopakovali za stejnych podmınek, meli bychom v prıpade testus dobrou reliabilitou zıskat velmi podobne vysledky.

hodnota se pohybuje od 0 do 1

test s dobrou reliabilitou ma hodnotu alespon 0.7

Reliabilita vypoctena metodou pulenı

rsb =2.rb

1 + rb

rb korelacnı koeficient mezi vysledekem zaku v sudych alichych ulohach

Vonkova Tvorba a vyuzitı didaktickych testu 19

Posuzovanı kvality merenı I - Validita

Validita = vystihuje, zda-li merıme skutecne to, co jsmezamysleli merit

Obsahova validita (Content validity) - porovnava se obsahtestu (ci jineho merıcıho nastroje) s domenou, ktera je merena

Kriterialnı validita (Criterion-related validity) - porovnejtestove skory s urcitym kriteriem pokryvajıcı oblast, kteroustudujes

soubezna validita (concurrent validity) - porovnanı skriteriem v tom samem case (napr. jinym testem, jinou mırouoblasti, na nız se zamerujes)predikcnı validita (predictive validity) - porovnanı skriteriem probıha v budoucnu (napr. predikcnı validitatestovych skoru u prijımacıch zkousek se muze porovnavat svysledky na vysoke skole)

Vonkova Tvorba a vyuzitı didaktickych testu 20

Posuzovanı kvality merenı II - Validita

Konstruktova validita (Construct validity) - porovnanıtoho, do jake mıry pokryva konstrukt oblast, kterou ma meritprıklad konstruktu je inteligence, konstruktova validita -pokryva test inteligence oblasti, jez inteligenci definujı

Nasledna validita (Consequential validity) - uvadı do jakemıry zpusobuje merenı nezadoucı, skodlive efektyprıklad - Jake jsou efekty testovanı zaku pomocı testu suzavrenymi polozkami?

Vonkova Tvorba a vyuzitı didaktickych testu 21

Posuzovanı kvality merenı III - Reliabilita

Reliabilita = vystihuje, do jake mıry je nase merenı spolehlivea konzistentnı

Stabilita (Stability) - reliabilita vypocıtana na zakladestability testovych skoruzadej test jedne skupine v dvou ruznych casech a vypocıtejkorelaci techto skoru

Ekvivalence (Equivalence) - reliabilita vypocıtana na zakladeporovnanı dvou verzı testu, ktere lze povazovat za ekvivalentnızadej alternativnı formy testu jedne skupine a koreluj jejichvysledky

Stabilita a evivalence (Stability and equivalence) -reliabilita vypocıtana na zaklade porovnanı dvou verzı testu,jez lze povazovat za ekvivalentnı, ktere jsou zadane v dvouruznych casechzadej testy jedne skupine v dvou ruznych casech

Vonkova Tvorba a vyuzitı didaktickych testu 22

Posuzovanı kvality merenı IV - Reliabilita

Vnitrnı konzistence (Internal consistency) - udava do jakemıry jsou polozky v testu podobne ostatnım polozkam v testu,merıme je pomocı Kuder-Richardsonova vzorce, Cronbachovaalfa, metodou pulenı

Hodnotitel - Scorer/Rater - udava, do jake mıry se nezavislıhodnotitele nebo jeden hodnotitel v ruznem caseshodnou/shodne na skorovanı (napr. skorovanı otevrenychuloh)

Vonkova Tvorba a vyuzitı didaktickych testu 23