Workshop Penulisan Soal

Indonesia

Januari 2010

Penyaji : Mark Butler

Greg Reid

DESAIN UJIAN

Soal ujian yang baik

• tidak terlalu sulit• tidak terlalu mudah• memiliki tingkatan kesulitan soal• memiliki tingkatan kesulitan stimulus• memiliki tingkatan jenis stimulus• mengukur keahlian/skil yang berbeda• membahas silabus• menarik bagi siswa/i

Kesulitan ujian

• 15% mudah (> 70% benar)• 35% sedang (50-70% benar)• 35% agak sulit (30-49% benar)• 15% sulit (< 30% benar)

Soal yang mudah adalah mudah karena

membutuhkan sebuah pemahaman yang sederhana

BUKAN karena• Jawabannya menonjol• Menggunakan kata-kata yang sama

sebagaimana stem (pertanyaan)nya• Menggunakan pengetahuan yang umum

Soal yang sulit adalah sulit karena

membutuhkan pemahaman yang lebih

BUKAN karena • Memiliki kosa kata yang tidak umum • Instruksinya tidak jelas• Menggunakan diagram atau teks yang

membingungkan• Memiliki banyak kata yang tidak perlu

Tingkatan (Range) kemampuan siswa/i

Biasanya, di negara-negara maju, tingkatan (range) kemampuan siswa/i adalah 5 tahun di kelas mana saja.

Ini berarti bahwa di rata-rata kelas 9, beberapa siswa/i memiliki standar kelas 7, dan beberapa yang lainnya memiliki standar kelas 11.

MATERI STIMULUS

Materi Stimulus

• teks (narasi, penjelasan, pendapat, informasi)• diagram/map• grafik• tabel• kombinasi dari yang diatas

Materi stimulus

• harus mengandung beberapa gagasan yang kompleks sehingga serangkaian keahlian dapat diukur

• seharusnya mengandung gagasan-gagasan yang tidak dapat diprediksi sehingga para siswa/i tidak dapat menduga jawabannya

Stimulus yang baik

• Menyajikan informasi secara jelas• Padat dan langsung ke inti masalah• Menarik bagi siswa/i• Benar secara fakta

• Seharusnya tidak mengandung pengulangan atau detail yang tidak perlu.

Grafik berikut memperlihatkan tinggi Mario dan Lita sejalan dengan bertambahnya umur mereka.

160 120 80 40 0

Mario

Lito

2 4 6 8 10

Height (cm)

Age (years)

Stimulus yang buruk

Informasi yang tidak benar

SOAL UJIAN

Soal ujian yang baik

• memberitahukan kepada pada siswa/i apa yang harus mereka kerjakan

• memfokuskan pada satu aspek kunci pembelajaran• menyajikan tugas riil yang membuat para siswa

tertarik• adil untuk para siswa dengan latar belakang yang

berbeda

Soal ujian yang baik

• jelas dan tidak kabur• menggunakan kosa kata sesederhana

mungkin• menggunakan struktur kalimat paling

sederhana• menggunakan kata-kata sesedikit mungkin

Soal ujian yang buruk

konteks tidak relevan

Irene akan membungkus kotak ini dengan kertas.

Paling sedikit, berapa banyak kertas pembungkus yang akan dia gunakan?

80 cm

Meligop, siliwa tillip bin offalju. Quamap bilong effi tillip jntano plsicanr.

Q Siliwa yutrewb quppolfr isnc?

A syyjk lypiundeg

B jntano plsicanr

C gooyt se pidnfin

D meskuj adsfnome

Meligop, siliwa tillip bin offalju. Quamap bilong effi tillip jntano plsicanr.

Q What did the siliwa tillip?

Siswa/i dapat mencocokkan kata-kata dari soal dengan stimulus serta menyalin jawabannya tanpa mengetahui makna teksnya.

Suatu hari seorang petani tua sedang menjelang ajal. Dia memanggil dua anak laki-lakinya yang malas secara bersamaan. “Anakku,” katanya, “saya akan memberitahukan sebuah rahasia kepada kalian. Saya kubur… harta karun …lapangan. Lihat…”

Dia meninggal sebelum menyelesaikan kalimatnya.

Q1 Apakah rahasia yang diberitahukan oleh petani tersebut kepada kedua anak laki-lakinya sebelum meninggal?

Q2 Menurut Anda, kira-kira apakah bunyi kalimat terakhirnya secara lengkap?

MCQ (Multiple Choice Question / Pertanyaan dengan banyak

jawaban)

Terminologi MCQ

Tula memiliki 3 bunga. Ayah memberinya 2 bunga lagi.Secara keseluruhan berapa banyak bunga yang dimiliki oleh Tula ?

A. 2

B. 3

C. 4

D. 5

kunci (jawaban yang benar)

distraktor

Stem

Stem

• Sebuah kalimat yang belum lengkap• Sebuah pertanyaan yang dinyatakan secara

jelas

Stem harus mengandung informasi yang cukup agar siswa/i dapat menjawab pertanyaannya.

Masukkan kata-kata di stem yang mungkin diulang di pilihan-pilihan jawabannya.

Stem yang buruk

Di dalam kisah ini, Mitch

A adalah seekor anjing.

B bahagia.

C sedang membuat kue.

D adalah ayah Ann.

Stem yang buruk

Carl pergi ke

A sungai dengan keluarganya.

B pantai dengan keluarganya.

C taman dengan keluarganya.

D gunung dengan keluarganya.

Kemana Carl pergi dengan keluarganya?

A sungai

B pantai

C taman

D gunung

Stem Negatif

Hindari penggunaan stem negatif karena dapat menimbulkan kebingungan.

Jika Anda harus menggunakan stem yang negatif, berikan tekanan pada kata tidak dengan huruf tebal.

jika Anda harus menggunakan stem yang negatif, pilihan-pilihan jawabannya tidak boleh negatif.

Lokasi kunci

Seharusnya lokasi kunci tidak memiliki pola yang jelas.

Pastikan bahwa kunci tidak selalu berupa pilihan jawaban yang paling panjang.

Kunci tidak boleh lebih menonjol dari distraktor.

Distraktor yang baik

• panjangnya mirip dengan kunci• ditulis dengan gaya serupa dengan kunci• masuk akal dan menarik, tetapi tidak benar

• Tidak memberikan petunjuk untuk menjawab soal yang lain

4 pilihan jawaban yang baik

• harus berbeda• harus tidak tumpang tindih

Satu distraktor tidak boleh menjadi penghubung dari yang lainnya.

Jangan gunakan kata-kata ‘tidak pernah’, ‘selalu’ ‘semua’, ‘hanya’ dan ‘tidak satupun’ di dalam pilihan jawaban.

Jangan pernah menggunakan ‘semua dari yang di atas’atau ‘tidak satupun dari yang di atas’.

Soal ujian yang buruk

Dengan apa Faizal ke pasar malam?

A kendaraan umum

B bus

C jalan kaki

D sepeda

PERTANYAAN TERBUKA

Pertanyaan terbuka sederhana

Soal ujian harus membiarkan para siswa untuk memberikan jawaban yang tidak benar.

Jika semua jawaban benar, maka soal tersebut tidak terlalu ada gunanya.

Soal dengan pertanyaan terbuka yang baik

• memiliki petunjuk penilaian yang jelas• membiarkan siswa/i untuk memberikan

jawaban yang benar dengan beberapa kata saja

• kebanyakan waktu harus dialokasikan untuk memikirkan solusi, TIDAK untuk mencatat jawaban.

Soal dengan nilai parsial

• harus membiarkan siswa/i untuk memberikan rangkaian (range) jawaban

• harus secara jelas membedakan antara jawaban yang sederhana dan jawaban yang lebih sulit

Seekor singa tua berkata bahwa dia sedang sekarat dan dia menginginkan semua hewan untuk menjenguknya. Rubah datang mendekati gua singa tetapi kemudian berhenti. Singa bertanya kenapa rubah berdiri terlalu jauh darinya. Rubah menjawab,’Karena banyak jalan masuk ke gua kamu, tetapi tidak ada satupun jalan ke luar gua.’

Mengapa singa meminta hewan-hewan untuk mengunjunginya? ______________________________________

Rubah danSinga

Soal dengan Nilai Parsial

2 merujuk pada keinginan untuk memakan mereka

Singa ingin memakan mereka.

Singa ingin menangkap mereka untuk makan malam.

1 Merujuk pada singa yang sekarat atau tua/sakit

Singa sedang sekarat.Singa sedang sakit keras.

0 jawaban kabur, tidak jelas atau tidak benarSinga menyukai rubah.

Singa ingin berbaik hati.

Layout soal

• Panjang baris untuk jawaban harus menunjukkan berapa sebuah banyak tulisan yang diharapkan dari siswa/i.

• Satu baris pendek cukup untuk sebuah jawaban satu kata.

• Dua atau tiga baris memberikan isyarat bahwa siswa/i harus menulis satu atau dua kalimat.

Model (contoh) soal-soal yang baik

• Australian Council for Educational Research (ACER) www.acer.edu.au – lihat ujian sekolah/school tests

• Programme for International Student Assessment (PISA) www.pisa.oecd.org

• International Association for the Evaluation of Educational Achievement (IEA) for Third International Mathematics and Science Study (TIMSS) and Progress in International Reading Literacy Studies (PIRLS). www.iea.nl

• US National Center for Education Statistics for National Assessment of Educational Progress (NAEP). www.nces.ed.gov

PANEL

Panel soal

Tanyakan diri anda pertanyaan-pertanyaan berikut.

• Apakah layout soal menarik dan jelas? • Jika Multiple Choice, apakah setiap pilihan

jawabannya menarik? • Jika TERBUKA, apakah petunjuk penilaian jelas? • Apakah soal cukup adil bagi semua populasi? • Apakah soal cocok dengan kerangkanya?

Panel soal

Apakah soal dapat diperbaiki dengan:

• memendekkannya? • menambahkan lebih banyak informasi?• mengubah ungkapan atau kata-katanya?• menambah sebuah diagram atau gambar? • mengubah format soalnya?