Unit 8: Analisis Item

• Satu proses mengenalpasti dan memilih item-item yang berfungsi setelah item-item diprauji terlebih dahulu untuk mengetahui statistik bagi setiap item berkenaan.

Tujuan Analisis Item:Menentukan

• Kesukaran item• Daya tarikan opsyen bagi sesuatu item• Bagaimana item mendiskriminasikan pelajar

dalam menjawab sesuatu item

• Analisis item untuk tujuan ujian rujukan kriteria (Criterion Referenced Test – URT) berbeza dari analisis item untuk tujuan ujian rujukan norma (Norm Referenced Test – URN)

• URN mencari perbezaan (variability) yang wujud antara pelajar

• URK menekankan penguasaan pelajar berdasarkan standard yang ditetapkan

Peringkat Analisis Item

• Analisis item awalan: Menentukan semua jawapan untuk menskor adalah betul, menentukan jawapan itu telah di punch pada tempat yang betul, mencari item cacat.

• Analisis item akhiran: Menentukan tiada item-tem yang tidak berfungsi, salah punch

Kegunaan Analisis Item:Untuk menganalisis pengajaran yang,

• Berkesan• Tidak berkesan atau tiada pengajaran• Tidak diperlukan• Item yang dikemukakan terlalu mudah

Indeks Kesukaran Item

• Ditulis sebagai nilai p• Perkadaran pelajar dalam kumpulan yang diuji

dapat menjawab sesuatu item dengan betul• Perkadaran dan julatnya antara 0.00 hingga

1.00 (0% - 100%)• Lebih tinggi nilai-p, lebih mudahlah sesuatu

item berkenaan kepada kumpulan yang diprauji iaitu lebih ramai pelajar dapat menjawab dengan betul

• Item dikotomi (betul diberikan 1 markah, salah diberikan 0 markah). Markah min bagi item berkenaan ialah perkadaran pelajar yang mendapat 1 bagi item itu; iaitu bilangan pelajar yang mendapat betul dibahagikan dengan jumlah pelajar yang menjawab item itu

• Nilai-p digunakan untuk menunjukkan min bagi item yang binari. Min ialah jumlah p dan ditulis p

• Bagi item binari, variannya bersamaan dengan pq

• P ialah perkadaran pelajar yang mendapat 1 dan q ialah perkadaran pelajar yang mendapat 0

• Sisihan piawai bagi item binari ialah punca ganda dua varian itu, pq

Tujuan Mentaksir Aras Kesukaran Item

• Item lebih mudah disusun diawal berbanding item lebih susah

• Pemilihan item yang sesuai bagi tujuan sesuatu ujian yang dijalankan

• Masalahnya, ialah penentuan tahap optimum nilai-p

• Jawapan terletak pada nilai diskriminasi item berkenaan. Item yang amat diskriminasi terletak pada nilai-p menghampiri kepada 0.5

• Asasnya, lagi rendah p0.5 maka agihan menjadi skew• Apabila setiap item mempunyai kesukaran 0.5, pembezaan

maksimum atau variasi akan wujud, lantaran itu ujian berpotensi menjadi lebih boleh dipercayai dan tinggi kesahannya

• Sukar mendapatkan item yang semua p nya bersamaan dengan 0.5, selalunya min kesukaran itemnya diambil dalam lingkungan 0.5

• Dipengaruhi oleh takad interkorelasi antara item. (Tinggi interkorelasi antara item/item homogen,dikotomosasi bagi kesemua kumpulan kepada yang lulus dan gagal/agihan ber bimodal

• Sekiranya p=0.5 bagi setiap item, dan item-item berkorelasi setepatnya antara satu sama lain; bermakna 50% pelajar menjawab betul semua item dan 50% pelajar akan menjawab salah .

• Ebel (1972) , lebih baik mendapatkan min kesukaran item pada 0.5

Faktor Yang Mempengaruhi Kesukaran Item

• Pengajaran• Latihan/pengalaman• Perkembangan individu – tahap umur dan

perkembangan psikologi/fisiologi• Item tidak berkaitan dengan kandungan

domain yang diuji

Diskriminasi Item

• Kebolehan sesuatu item mengukur kepekaan pembezaan individu. Sesuatu item dianggap berdiskriminasi jika ramai pelajar dari kumpulan pandai menjawabnya dengan betul berbanding pelajar lemah

Indeks Diskriminasi Item, D

• Ialah pembezaan di antara kumpulan atasan (biasanya 27%) yang dapat menjawab sesuatu item itu dengan betul dengan kumpulan bawahan (biasanya 27%) yang dapat menjawab item yang sama itu dengan betul

D = Tb - Rb

D Indeks diskriminasi Tb Perkadaran yang jawab betul bagi kumpulan

Tinggi Rb Perkadaran yang jawab betul bagi kumpulan

Rendah

Indeks ini mempunyai julat -1.00 ke +1.00

Indeks diskriminasi Maksud

Lebih dari 0.4 Item amat diskriminasi

0.30 ke 0.39 Item yang berdiskriminasi

0.20 ke 0.29 Diskriminasi yang sederhana

0.10 ke 0.19 Kurang diskriminasi, perlu semakan semula

Kurang dari 0.10 Item kurang diskriminasi, item dibuang

Pertalian Antara p dengan DD

p

1

-1 1

0

-1 1

0

0

• Bagi indeks kesukaran p = 1, maka indeks diskriminasi ialah sifar, kerana pada aras kesukaran p = 1 (amat mudah) tidak terdapat perbezaan antara kumpulan pandai dari kumpulan lemah

• Untuk mendapatkan nilai D yang tinggi, maka nilai-p nya juga harus rendah

• Aras optimum kesukaran item, lagi rapat nilai-p ke 0.5, item itu akan jadi lebih diskriminasi, D = 1

• Apabila indeks kesukarannya menurun ke 0, maka julat indeks diskriminasinya juga turun

Hubungkait Kebolehpercayaan Ujian Dengan Diskriminasi Item

• Kebolehpercayaan juga boleh dirujuk sebagai takad perbezaan skor ujian pelajar yang disebabkan oleh perbezaan sebenar kebolehan pelajar

• Ujian yang berkebolehpercayaannya tinggi haruslah mengandungi indeks diskriminasi yang positif dan tinggi

Penilaian Distraktor

• Dibuat ke atas distraktor item yang dipilih untuk dikaji dan dibuat penyesuaian ke atas distraktor yang tidak berfungsi

• Distraktor yang baik ialah: dapat menarik minat pelajar yang lemah / tidak faham / tidak menguasai pelajaran. Pelajar yang menguasai pelajaran tidak memilih distraktor itu.

• Distraktor yang tidak dipilih / tidak berkaitan dengan pokok soalan hendaklah dikeluarkan

Cara Mengkaji Keberkesanan Distraktor

• Jadual Kekerapan• Garis Turihan• Indeks Statistik

Jadual Kekerapan

• Ialah taburan respons bagi setiap opsyen mengikut kumpulan skor

• Contoh, Jadual 7.1 menunjukkan jadual kekerapan untuk item 1 .

• Menggunakan 5 skor kumpulan mewakili 5 kumpulan aras pencapaian yang tersusun. Setiap kumpulan mewakili 20% daripada jumlah sampel pelajar.

Jadual 7.1: Kekerapan untuk item objektif pelbagai pilihan dengan 4 pilihan

Kumpulan Skor Opsyen (%)A B C D

80-99 19 1 0 060-79 14 3 1 240-59 8 4 2 620-39 8 9 1 201-19 6 12 1 1

Jumlah 55 29 5 11

Ini boleh dianggap bentuk respons pelajar yang baik

Garis Turihan

• Satu gambaran tentang prestasi item sebagai fungsi prestasi keseluruhan

• Sesuatu item yang berfungsi dengan baik mengandungi garis turihan menaik secara monotonik (Kunci untuk opsyen A)

• Garis turihan rendah bagi pelajar yang lemah dan menaik apabila jumlah skor ujian bertambah

• Bagi distraktor seharusnya mempunyai garisan turihan yang menurun secara monotonik

• Kumpulan lemah akan condong memilih opsyen B• Kumpulan sederhana dan pandai tidak memilih opsyen D,

mendatar.

Jadual 7.2: Graf Garis Turihan

1 hingga 19 20-39 40-59 60-79 80-990

2

4

6

8

10

12

14

16

18

20

JawapanDistraktor BDistraktor CDistraktor D

Indeks Statistik

• Sering digunakan• Product moment correlation antara prestasi distraktor

dan jumlah markah ujian – indeks rpbis.

• Indeks ini mempertimbangkan min prestasi pelajar yang menolak sesuatu distraktor dengan mereka yang tidak memilih distraktor berkenaan. Jika korelasinya positif dan statistiknya signifikan, ini menunjukkan opsyen itu adalah kunci bagi item yang berkenaan dan sebaliknya. Jika opsyen itu korelasinya negatif, statistiknya signifikan menandakan opsyen itu adalah distraktor.

Saiz Sampel

• Mendapatkan 5 ke 20 kali bilangan pelajar bagi setiap item yang hendak diprauji.

• Contoh, bagi praujian yang mengandungi 60 item, harus mendapatkan sekurang-kurangnya 300 pelajar

Analisis Item Bilik Darjah• Periksa kertas jawapan objektif. Susun kertas

jawapan mengikut markah yang terendah ke tertinggi

• Bahagikan kertas jawapan kepada kumpulan sama banyak iaitu 50% T dan 50% R. Jika terdapat bilangan kertas jawapan yang ganjil, keluarkan kertas jawapan yang di tengah-tengah

• Bahagikan murid dalam kelas kepada dua kumpulan. Berikan kertas jawapan T kepada satu kumpulan dan R kepada kumpulan yang satu lagi

• Sediakan jadual seperti berikut bagi tiap-tiap soalan

Jadual Pencapaian Pelajar Bagi Setiap Item Dalam Ujian Bulanan Sejarah (Lihat m.s. 171-172)

Calon Item 1 Item 2 Item 3 Item 4 Item 5 Item 6 Item 7 Item 8 Item 9 Item 10 Jumlah

A C B D A B C C A D

1 0 1 1 0 0 1 0 0 0 1 4

2 1 1 1 1 1 1 0 1 1 1 9

.

.

20 1 1 1 0 1 1 1 1 1 1 9

.

.

40 1 0 1 0 0 1 0 0 0 0 3

Var 5.95

Sp 2.44

p 0.50 0.58 0.68 0.38 0.45 0.50 0.53 0.48 0.35 0.53

q 0.50 0.43 0.33 0.63 0.55 0.50 0.48 0.53 0.65 0.48

pq 0.25 0.24 0.22 0.23 0.25 0.25 0.25 0.25 0.23 0.25 2.42

Jadual Pencapaian Pelajar Bagi Setiap Item Dalam Ujian Bulanan Sejarah (Lihat m.s. 173-174) Setelah Disusun

Calon Baru

Item 1 Item 2

Item 3

Item 4

Item 5

Item 6

Item 7

Item 8

Item 9

Item 10

Jumlah

A C B D A B C C A D

1 0 0 0 0 0 0 0 0 0 0 0

2 0 0 0 0 0 0 1 0 0 0 1

.

.

20 0 1 0 0 1 1 0 1 0 1 5

.

.

40 1 1 1 1 1 1 1 1 1 1 10

Betul Tinggi 15 14 16 13 12 13 13 16 11 14

Betul Rendah 5 9 11 2 6 7 8 3 3 7

Contoh: Item 6Jum. Pelajar 40 orang (N=40)

Pilihan Jawapan O A B* C D

Bilangan Murid 0 7 20 7 6

Kesukaran Item (p) 0.00 0.175 0.500 0.175 0.150

Kumpulan T R T R T R T R T R

Bilangan (Baik/Lemah)

0 0 2 5 13 7 3 4 2 4

Diskriminasi (D) 0.00 -0.15 0.30 -0.05 -0.010

Jawapan: BKesukaran, p 0.50Diskriminasi, D = (T – R) N/2

T (Kumpulan Pencapaian tinggi)R (Kumpulan Pencapaian Rendah)

Contohnya,

• Guru bertanyakan murid-murid yang tidak menjawab item 1 (O = omit) dan tentukan bilangannya. Tentukan sama ada mereka daripada Kumpulan T atau R, isikan bilangan pelajar berkenaan dalam jadual. Kemudian tanya lagi siapa pula menjawab A sehingga habis.

• Setelah jadual lengkap diisi, tentukan kesukaran setiap item• P (kesukaran soalan) = Bilangan murid menjawab betul dibahagi dengan jumlah pelajar. = 20/40 = 0.50• D (Indeks Diskriminasi) = (T – R) = (13-7) /20 = 0.3 N/2

Penerangan contoh,

• Indeks diskriminasi bagi item ini ialah 0.3. Opsyen B merupakan jawapan betul, oleh itu nilainya mestilah positif.

• Bagi item distraktor, nilai D nya mestilah negatif.• Kunci bagi semua item hendaklah mempunyai nilai

D positif dan lebih daripada 2, iaitu lebih ramai pelajar dari kumpulan Tinggi menjawab betul berbanding kumpulan Rendah

• Setelah item melalui proses analisis item, maka item itu sama ada dibuang, disimpan, atau diperbaiki.

Ciri-ciri Penting Item URK

• Kesukaran Item - Setiap item tidak diuji dari segi kesukarannya tetapi diuji dari segi pencapaian objektif bagi sesuatu item

• Kepekaan Item Kepada Pengajaran - Sesuatu item itu haruslah dapat dijawab dengan mudah selepas pengajaran dibuat berbanding dengan tanpa pengajaran

Analisis Item URK

• Analisis terhadap bentuk respons pelajar tentang kemahiran dan matlamat sesuatu objektif membantu guru menentukan sama ada sesuatu objektif itu telah dapat dikuasai sepenuhnya atau belum. Dengan cara ini guru dapat menentukan kualiti prestasi setiap pelajar dan dapat mencadangkan langkah-langkah yang bersesuaian untuk membantu mereka selepas itu

• Untuk menentukan penguasaan pelajar bagi sesuatu item, item-item diatur mengikut topik, tentukan aras prestasi bagi setiap kemahiran yang difikirkan telah menguasai kemahiran.

• Jika kemahiran itu diukur melalui ujian subjektif, tentukan skor minimum yang boleh dikatakan sebagai telah mencapai aras minimum atau menguasai sepenuhnya.

• Andainya objektif itu diwakili oleh 5 atau 6 item sahaja, maka tentukan sama ada menjawab betul kepada 3 atau 4 item boleh dianggap sebagai telah menguasai kemahiran berkenaan.