Öğrenci Değerlendirme Öğrenci Değerlendirme

YöntemleriYöntemleri

1

Zekeriya Aktürk

Mevlana Üniversitesi Tıp Fakültesi

Eğitici Eğitimi Kursu

27-31 Mayıs 2013

http://aile.atauni.edu.tr

/ 42

Hedefler

Bu oturum sonunda katılımcıların aşağıdaki hedeflere ulaşması beklenmektedir :

•Ölçme ve değerlendirme kavramlarını açıklayabilmeli•Öğrencileri kimin değerlendirmesi gerekitğini tartışabilmeli•Öğrencilerin neden değerlendirilmesi gerektiğini tartışabilmeli•Neyin değerlendirileceğini tartışabilmeli•Öğrenci değerlendirme yöntemlerini açıklayabilmeli

2/ 42

Ölçme ve Değerlendirme

• Ölçme: (assessment)– Öğrenenin seviyesinin belirlenmesini amaçlar.

– Yapılandırıcı geribildirim verilmesini sağlar.

– Hamit Tıp Eğitimi kursu son testinden %75 puan aldı.

• Değerlendirme (evaluation)– Öğrencinin belirlenen yeterliliklere ulaşıp ulaşmadığı

hakkında karar verilmesidir.

– Hamit Tıp Eğitimi kursunda başarılı oldu belge aldı.

3/ 42

Öğrenmenin gerçekleştiğini nasıl anlarsınız?

4/ 42

Öğrenme sürecinde ilişkiler

5/ 42

Neleri değerlendirmeli?

6

• Öğrenme üç alanda gerçekleşir. Dolayısıyla değerlendirme de bu üç alanda yapılmalıdır:

• Bilgi

• Normal kan basıncı sınırlarını söyleyebilmek.

• Beceri

• Kan basıncını koldan sfingomanometre ile ölçebilmek.

• Tutum

• Muayeneye gelen her erişkin hastasının kan basıncını ölçmenin gereğine inanması

Newble D. Assessment. In: Jolly B, Rees L. (Editors) Medical education in the millennium, Oxford: Oxford University Press; 1998.p.131–42.

/ 42

Bilişsel hedeflerin ölçümü

• Çoktan seçmeli sınav

• Sözlü sınav

• Simulasyon / Maketle sınama

• 360 derece genel değerlendirme

7 / 42

/ 428

Mini Clinical Evaluation Exercise

(Mini CEX)

/ 429

Psikomotor Gelişim Tutum / Davranış Ölçümü

• Sözlü

• Nesnel Yapılandırılmış Sınavlar

• Ödev / Proje Hazırlama

• Karne ile profilleme

• Gözlemsel Yöntemler

10 / 42

Nesnel Yapılandırılmış Sınavlar

• OSCE; Objective Structured Clinical Examination– NÖKS - Nesnel Örgün Klinik Sınav

• OSPE; Objective Structured Practical Examination– NÖPS- Nesnel Örgün Pratik Sınav

• CORE; Clinically Oriented Reasoning Exam– KNS; Klinik Nedenselleştirme Sınavı

• OSLER;Objective Structured Long Assay Reporting– NYURT; Nesnel Yapılandırılmış Uzun Rapor Yazımı

11 / 42

Değerlendirmeyi kim yapmalı? Tıp fakültesi

Uluslararası akreditasyon örgütü Ulusal akreditasyon örgütü Meslek örgütleri ÖSYM vb Anabilim dalı Eğitici Hastalar / toplum Öğrencinin kendisi

12/ 42

13

Neden ölçme yaparız?

Yeterliliği gösterme

Öğrencileri derecelendirme

Bir öğrencideki ilerlemeyi takip etme

Öğrenmedeki zorlanmaları saptama

Eğitim yöntemini değerlendirme Öğrencileri öğrenmeye teşvik etme Eğiticiye geribildirim verme Öğrenciye geribildirim verme / 42

Soru Çeşitleri

• ÇSS• Sözlü• Yazılı• CORE• OSCE• Short answer• Extended Matching• MEQ• Mini- CEX, DOPS

14 / 42

• Paradoks nabız aşağıdaki hastalıklardan hangisinde görülmez?A) Perikart tamponadıB) Kalp yetmezliğiC) Tansiyon pnömotoraksD) Hemorajik şokE) Pulmoner emboli

15 / 42

• Yetmiş iki yaşındaki kadın hasta, çabuk yorulma yakınmasıyla başvuruyor. Son 2 aydır 1 kat merdiven çıktığında yorulduğunu ve nefes almak için duraklaması gerektiğini ifade ediyor. Geceleri uyuyabilmek için 2 yastık kullandığını; ancak yine de uyuduktan 2-3 saat sonra nefessiz kalarak uyandığını belirten hastanın kan basıncı 170/95 mmHg, kalp hızı 115/dakika, düzensiz ve solunum sayısı 22/dakika’dır. Hastanın muayenesinde palpasyon ile kalp tepe atımının lateralve inferiora doğru yer değiştirdiği belirleniyor. 3 (+) pretibial ödem ve akciğer oskültasyonunda her iki akciğer bazalinde krepitan raller saptanıyor.Bu hastanın tedavisinde kullanılabilecek ilaçlardan hangisi nöro-hormonal aktivite artışı yapar?A) ValsartanB) SpironolaktonC) FurosemidD) KaptoprilE) Kandesartan 16 / 42

17 / 42

18 / 42

19 / 42

• "Sınıfımızı okulumuzu evimizi bayraklarla süsledik."

Bu cümlede kaç yerde virgül kullanılmalıdır?

• A. üç

• B. iki

• C. bir

20http://www.fileden.com/files/2007/3/13/880655/2.%20SINIF%203.%20SBS.doc / 42

Uzun Yazılı

• Aile hekimliği uygulamasında hasta merkezli sağlık hizmeti sunum modelini açıklayınız ve hizmet kalitesine etkisini tartışınız.

21 / 42

Bağlantılı Yazılı Sorular

• What are the possible aetiologies of colitis in the adult horse (20%)? List the clinical signs of colitis in the adult horse and explain the diagnostic tests you would conduct to attempt to establish a diagnosis and monitor the clinical condition of the horse (30%). Explain how you would manage a horse with colitis (30%) and describe the biosecurity measures you would put in place pending laboratory confirmation (20%).

22

http://www.rcvs.org.uk/document-library/2012-question-papers/2012-papers.pdf

/ 42

Kısa Yazılı

• Şeker hastalığı ve yüksek kan basıncı bulunan 55 yaşındaki bir erkek hastada kullanılabilecek antihipertansif ilaçları yazınız.

23 / 42

Sözlü Sınav

• Giriş sorusu:– 45 yaşında 88 kg ağırlığındaki bir erkek

hastanın vücut kitle endeksi kaçtır?

• Hesaplayabilirse:– VKİ düzeyine göre şişmanlığın sınıflaması

nasıl yapılır?

• Cevaplayabilirse:– Bu hastaya hangi şiddette egzersiz önerirsiniz?

24 / 42

OSCE

25

http://www.turkdermatoloji.org.tr/files/file/Turk_Dermatoloji_Yeterlik_%28Bord%29_Sinavi.pdf

/ 42

OSPE

• Temel ilke ve yöntemi NÖKS’e benzeyen uygulama sınavları– Maket üzerinde intramusküler uygulama

yapınız.

26 / 42

CORE

• Basamaklar halinde seçilmiş vakalarda düşünme becerisini ölçmek için yapılır– Öykü– Fizik muayene– Ön tanılar– Tedavi

27 / 42

OSLER

• Nesnel Yapılandırılmış Uzun Rapor Yazımı– Kritik düşünme – Nedenselleme– İfade etme

28 / 42

29Miller GE. The assessment of clinical skills/competence/performance. Academic Medicine (Supplement) 1990; 65: S63-S7.

Ne olduğunu bilir

Gösterir

Nasıl olduğunu bilir

Yapar

Bilişsel

DavranışsalBilişsel, Duyuşsal,Beceri

Prof

esyo

nell

ikPr

ofes

yone

llik

Miller’in ustalık piramidi

/ 42

30

Miller piramidi

Bilir

Nasıl yapacağını bilir

Gösterir

Yapar Performans değerlendirmesi: Çalışma ortamında

Yeterlilik değerlendirmesi: OSCE

Sadece hatırlama: ÇSS, sözlü…

Ortama göre değerlendirme: ÇSS, CORE, sözlü…

/ 42

Bilir

Knows

Gösterir

Nasıl yapacağını bilir

Yapar

BilirYazılı, MEQ,

ÇSS vb

31/ 42

Farklı sınav tiplerinin özellikleri

Applications Essay Short answer

MCQ Extended Matching

MEQ

Application of knowledge Excellent Good Poor Good Excellent

Assessment Excellent Good Poor Fair Good

Coverage of topic Poor Good Excellent Excellent Excellent

Reliability of score Poor to Fair

Good Excellent Excellent Excellent

Ease of scoring Poor Fair Excellent Excellent Excellent

Preparation time Min to Mod

Mod Large Mod Mod

Total cost Large Mod Low Low Mod

Cheating Difficult Difficult

Easy Easy Difficult

32University of Dundee, 2004

/ 42

Nasıl yapacağını bilir

Yazılı karmaşık

simulasyonlar

33

Gösterir

Nasıl yapacağını bilir

Yapar

Bilir

/ 42

Gösterir

Shows how

in vitro performans

değerlendirmesi (OSCE)

34

Gösterir

Nasıl yapacağını bilir

Yapar

Bilir

/ 42

Yapar

Does

in vivo performans değerlendirmesi (Mini- CEX, DOPS, Portföy)

35

Gösterir

Nasıl yapacağını bilir

Yapar

Bilir

/ 42

Farklı yöntemlerin güvenilirlikleri

Süre

(Saat)

1

2

4

8

ÇSS1

0.62

0.76

0.93

0.93

Kısa Yazılı2

0.68

0.73

0.84

0.82

PMP1

0.36

0.53

0.69

0.82

Sözlü3

0.50

0.69

0.82

0.90

Uzun vaka4

0.60

0.75

0.86

0.90

OSCE5

0.47

0.64

0.78

0.88

VideoDeğerlen-

dirme7

0.62

0.76

0.93

0.931Norcini et al., 1985

2Stalenhoef-Halling et al., 1990

3Swanson, 1987

4Wass et al., 2001

5Petrusa, 2002

6Norcini et al., 1999

In-cognito

SP8

0.61

0.76

0.92

0.93

MiniCEX6

0.73

0.84

0.92

0.967Ram et al., 1999

8Gorter, 2002

36Cees van der Vleuten, 2010/ 42

Güvenilirliği etkileyen faktörler

Environmental errorsProcessing errorsGeneralization errorsBias errors

a. Weighting

b. Rater prejudice

c. Halo effect

d. Leniency and stringency

37/ 42

Geçerliliği etkileyen faktörler

Unclear instructions Complicated vocabulary Too easy/difficult items Unintentional clues Not matching with outcome Inadequate time Too few items Unsuitable item arrangement Detectable answer pattern

38/ 42

Öğrenen ne zaman değerlendirilmelidir?

• Eğitimin başında

• Eğitim sırasında (Formatif)

• Eğitimin sonunda (Summatif)

39/ 42

Değerlendirme Nerede Yapılmalıdır?

• Sınav salonu

• Sınıf

• Hastane servisleri

• Poliklinik

• Iş yeri

• Toplum içerisinde

/ 4240

Sadece öğrenciyi mi değerlendirmeliyiz?

Öğrenci

Anabilim Dalı

Fakülte / Üniversite

Ders / Eğitici

Ülke / Sistem

/ 4241

Özet

• Ölçme ve değerlendirme nedir?

• Hangi öğrenme boyutlarını ölçeriz?

• Bilgiyi ölçmek için hangi /sınav uygundur?

• Beceriyi ölçmek için hangi soru/sınav tiplerini uygundur?

42 / 42