Embed Size (px)
Citation preview
Evaluation
Centre for Project and Programme Evaluation,Office of Agricultural Economics
Anuwat Pue-on, Ph.D.
Outline1. Overview2. Criterion and Indicators3. Evaluation Design
2
การประเมินผล
หมายถึง
.......................................................................
.......................................................................
กระบวนการที่ใชในการอธิบายและตัดสินคุณคา
ของส่ิงใดส่ิงหน่ึงอยางมีหลักเกณฑ
1. Overview
3
จุดมุงหมายของการประเมินผล
เปนขอมูลสารสนเทศประกอบการตดัสนิใจ1
เพือ่ใหการบริหารโครงการเปนไปอยางมีประสทิธภิาพ2
เพือ่ตรวจสอบผลการดาํเนนิโครงการวาประสบผลสาํเร็จหรือไม
3
เพือ่นาํไปใชในการปรับปรุงโครงการทีค่ลายกัน4
4
แนวคิดการประเมินผล
Cronbach’s
Tyler’s
Alkin’s
Stake’s
Provus’s
Stufflebeam’s
5
Tyler’sOutput ⇌ Objective
Provus’sStandard
ActualGap
Stufflebeam’sCIPP
Cronbach’sObjective + Process
Stake’sDesire
ActualGap
แนวคิด: ประเมินทั้งระบบสภาวะแวดลอมContext Evaluation
ปจจัยเบื้องตนInput Evaluation
กระบวนการProcess Evaluation
ผลผลิตที่เกิดขึ้นProduct Evaluation
Stufflebeam’s
--> What needs to be done?
--> How should it be done?
--> Is it being done?
--> Did the project succeed?
Offer a way to describe and share an understanding of relationships among elements necessary to operate a program or change effort
Describe a bounded project or initiative: both what is planned (the doing) and what results are expected (the getting)
Likened to a picture map of how the programtheoretically works to achieve benefits for participants - often expressed as brief diagrams or flow charts
Logic Model8
Logic Models provide a clear roadmap to a specified end.
Knowlton & Phillips (2012) The Logic Model Guidebook – Better Strategies for Great Results, Treasury Board of Canada (2001)
Input Process Output Outcome Impact
9
10
ประเภทการประเมินผล
•การประเมินผลกอนเริ่มโครงการ
•การประเมินผลระหวางโครงการ
•การประเมินผลเม่ือเสร็จส้ินโครงการ
11
จุดมุงหมายของการประเมินผล
ศึกษาความเหมาะสมของโครงการ
(เศรษฐกิจ สังคม สภาพแวดลอม เทคนิค)
ศึกษาความพรอมของปจจัย/ทรัพยากรนาํเขา
การประเมินผลกอนเริ่มโครงการ
ศึกษาการตอบสนองนโยบาย/ความตองการ
12
จุดมุงหมายของการประเมินผล
การประเมินผลระหวางโครงการ
ตรวจสอบความกาวหนา
วเิคราะหความนาจะเปนทีท่าํใหโครงการประสบ
ผลสาํเร็จ
แกไข ปรับปรุงโครงการ
วเิคราะหหาปจจัยทั้งดานบวกและลบที่มีตอผลสาํเร็จ
ของโครงการ
13
• ตัดสินวาโครงการประสบผลสําเร็จ/
บรรลุวัตถุประสงคของโครงการหรือไม
• ศึกษาผลกระทบตางๆ
การประเมินผลเมื่อเสร็จสิ้นโครงการ
จุดมุงหมายของการประเมินผล
14
แผนแบบการประเมินผล
1. แผนแบบทดลอง (เปรียบเทียบ)
- กลุมทดลอง/ในโครงการ VS
- กลุมควบคุม/กลุมนอกโครงการ
(control group)
1.1 Pre test-Post test Design (No control group)
1.2 Pre test-Post test Design (With control group)
1.3 Post test only Design (With control group)
15
แผนแบบการประเมินผล
2. ไมใชแผนแบบทดลอง
- เปรียบเทยีบผลของโครงการ กับโครงการอ่ืนทีม่ี
ลักษณะคลายกัน
16
กระบวนการของการประเมินผล
1. ศึกษาความตองการใชของผูใชขอมูลการประเมินผล
- มหาวทิยาลัย ผูใหทุนวจิยั หนวยงานราชการ
2. ศึกษารายละเอียดของโครงการ
17
3. กําหนดวัตถปุระสงคและขอบเขตทีจ่ะประเมิน
กระบวนการของการประเมินผล
4. กําหนดตัวช้ีวัดและเกณฑการประเมินผล
5. กําหนดวิธกีารรวบรวมขอมูล และการวเิคราะหขอมูล
18
กระบวนการของการประเมินผล
6. การเก็บรวบรวมขอมูล
7. ประมวลผล วเิคราะหขอมูล แปลผล
8. เขียนรายงาน
19
ซื่อสัตยตอวิชาชีพ
มคีวามรบัผิดชอบ
รักษาความลับอยางเครงครัด
ไมละเมิดสทิธิเสรีภาพของผูอืน่
มีคุณธรรม
จรรยาบรรณของนักประเมินผล
20
2. Criterion and Indicators
ถาทานจะเลือกซื้อ
ผลิตภณัฑ “นํ้าสม”
ทานจะพิจารณาอะไรบาง
21
Indicators
เครื่องมือบอกทิศทางวาการพัฒนาหรือการดําเนินงาน บรรลุวัตถุประสงคและเปาหมายเพียงใด (เมธี, 2540)
เวลา + สถานที่
นําไปตีคา เปรียบเทียบกับเกณฑ หรือมาตรฐาน
ความหมายภายใตเงือ่นไข
สิ่งที่บงบอกคุณลักษณะของสิ่งที่ทําการวัดวามี
ปริมาณหรือคุณลักษณะเชนไร
22
ลักษณะที่ดีของตัวช้ีวัด
Specific เฉพาะเจาะจง และชัดเจน
Measurable สามารถวัดได
Achievable (Attainable) สามารถบรรลุได
Realistic (Relevant) สอดคลองกบัความเปนจริง
Timely วัดไดในชวงเวลาที่กําหนด
S M A R T
23
ประเภทตัวชีว้ัดตามประเภทตัวชีว้ัด
1. ตัวชี้วัดปจจัยนําเขา (Input Indicators)
2. ตัวชี้วัดกระบวนการ (Process Indicators)
3. ตัวชี้วัดผลผลิตหรือผลการดําเนินงาน (Output Indicators)
4. ตัวชี้วัดผลลัพธ (Outcome Indicators)
5. ตัวชี้วัดผลกระทบ (Impact Indicators)
24
คาของตัวช้ีวดั
จํานวน (Number)
รอยละ (Percentage)
อัตราสวน (Ratio)
สัดสวน (Proportion)
อัตรา (Rate)
คาเฉลี่ย (Average or Mean)
25
เกณฑ (Criterion)
ระดับท่ีกําหนดไว หรือ มาตรฐานท่ีควรจะเปน
เพ่ือใชในการตัดสินโครงการ
1. ระดบัของเกณฑการประเมินผล
2. ประเภทของเกณฑการประเมินผล
26
2 ระดับ
คือ การกําหนดคาใหนอยกวาหรอืมากกวา เกณฑทีต่ั้งไว เชน
ผานหรอืไมผาน ไดหรือตก
ระดบัของเกณฑการประเมินผล
มากกวา 2 ระดบั
คือ การกําหนดคาเปนตวัเลขตามลาํดบั ซึง่มากกวา 2 ระดับข้ึนไป
เชน 3 ระดับ 5 ระดับ หรือ 10 ระดับ ฯลฯ
27
ประเภทของเกณฑการประเมินผล
1. เกณฑสัมบรูณ (Absolute Criteria)
2. เกณฑสัมพัทธหรือเกณฑมาตรฐานเชิงนโยบาย
(Relative Criteria or Policy Criteria)
3. เกณฑมาตรฐานหรือเกณฑเชิงวทิยาศาสตร
(Standard Criteria or Scientific Criteria)
4. เกณฑความเคล่ือนไหวเชิงพัฒนา (Growth Criteria)
28
ประเภทของขอมูล
ขอมูลปฐมภูมิ
ขอมูลทตุิยภูมิ
ตามที่มาของขอมูล ตามลกัษณะขอมูล
ขอมูลเชงิปริมาณ
ขอมูลเชงิคณุภาพ
ตามมาตรวดั
นามบัญญัติ
เรียงอันดับ
อันตรภาคชั้น
อัตราสวน
3. Evaluation Design29
ขอมูลตามท่ีมาของขอมูล
ขอมูลปฐมภูม ิ เปนขอมูลทีเ่ก็บรวบรวมเองโดยหนวยงาน
ผูประเมิน จากการสาํรวจขอมูลดวยการสุมตวัอยาง หรือ
ประชากร
ขอมูลทุติยภูมิ เปนขอมูลที่มีการรวบรวมไวแลวทั้งหนวยงาน
ของผูประเมินและหนวยงานอ่ืนๆ เชนเอกสาร
ประกอบการรายงานตางๆ เอกสารวชิาการ วทิยานพินธ
30
31
ขอมลูตามลักษณะขอมลู
ขอมูลเชิงปริมาณ ระบุคาเปนตัวเลขได
แบบไมตอเน่ือง เชน เลขจํานวนเต็ม (0 1 2)
แบบตอเนื่อง เชน เลขท่ีมีจุดทศนิยม (9.08)
ขอมูลเชิงคุณภาพ ไมสามารถระบุคาได เชน ความพึง
พอใจ ความกินดีอยูด ีความม่ันคงในชีวติ ความ
ปลอดภัย
ขอมลูตามมาตรวัด
1. ขอมูลนามบัญญัติ (Nominal data)เปนมาตรวัดที่สามารถแบงคาของกลุมตัวแปรที่แตกตางกัน
ไดเปนสวนๆ แตไมทราบวาคาตวัแปรใดมากกวากัน
ตัวอยางเชน เพศชาย และเพศหญิง
สาขาวชิา การเงนิ เศรษฐศาสตร
หยาบ→ ละเอียด
32
2. ขอมูลเรียงอันดับ (Ordinal data)
เปนมาตรวัดที่สามารถแบงคาของกลุมตัวแปรที่แตกตาง
กันไดเปนสวนๆ และทราบวาคาตัวแปรใดมากกวากัน แต
ไมทราบวามากกวากันเทาใด
ตัวอยางเชน เกรด A B C D
ระดบัการศึกษา ช้ันประถมปที ่1 2 3 4 5 และ 6
ขอมลูตามมาตรวัด
33
3. ขอมูลอันตรภาค (Interval data)
เปนระดบัการวดัที่สามารถบอกปริมาณของความแตกตาง
มากนอยทีแ่นนอนได และความแตกตางมีคาเทากันในแตละ
ชวง คาศูนยของขอมูลประเภทนี้เปนการสมมตขิึน้ “ไมใชศูนย
แท” (non absolute zero)
ตัวอยางเชน ปปฏิทนิ คะแนนสอบ อุณหภูมิองศาฟาเรนไฮท
หรือเซลเซียส
ขอมลูตามมาตรวัด
34
4. ขอมูลอัตราสวน (Ratio data)
เปนมาตรวัดที่สามารถแบงคาของตัวแปรที่แตกตางกันไดเปน
สวนๆ และทราบวาคาตวัแปรใดมากกวากันเทาใด และแตกตาง
กันเปนจํานวนเทาไร คาเริ่มตนคือ “ศูนย”
ตัวอยางเชน อาย ุน้าํหนกั ระยะทาง รายได รายจาย
ขอมลูตามมาตรวัด
35
การเก็บรวบรวมขอมูล
ประชากร: กลุมสมาชิกทัง้หมดทีต่องการศึกษา
กลุมตวัอยาง: สวนหนึ่งของประชากรที่ถกูเลือกมาศึกษาแทน
ประชากรทั้งหมด
36
การสาํมะโน: เก็บขอมูลจากประชากรเปาหมายทัง้หมดที่
ตองการศึกษา
การสุมตวัอยาง: เก็บขอมูลจากประชากรบางสวน จากประชากร
เปาหมายทัง้หมดทีต่องการศึกษา
การเก็บรวบรวมขอมูล
37
การกําหนดขนาดตัวอยาง
ไมมีกฎเกณฑตายตัว แตส่ิงที่ตองพิจารณา:
ขนาดของประชากร – ใหญมากตองสุม
ลักษณะความแตกตางของประชากร – ตต. มากสุมมาก
งบประมาณ และบุคลากร
เคร่ืองมือทีใ่ชในการวเิคราะห – ไปรษณีย ตอบกลับนอย
แผนแบบการสุมตัวอยาง – อยางงาย แบงช้ันภูมิ ...
ระดบัความคลาดเคล่ือนจากการประมาณการ – ความคลาดเคล่ือนนอย ใชขนาดตวัอยาง มาก
ระดบัความเช่ือม่ัน – เช่ือม่ันสงู ขนาดตวัอยางมาก
38
39
ขนาดตัวอยาง
เกณฑ ตาราง
Yamane Krejcie & Morgan
สูตร
Yamane Krejcie & Morgan
การกําหนดขนาดตัวอยางโดยเกณฑ
A. ประชากรหลักรอย ใชตัวอยาง 15 – 30%
B. ประชากรหลักพัน ใชตัวอยาง 10 – 15%
C. ประชากรหลักหม่ืน ใชตัวอยาง 5 – 10%
40
Taro Yamane
N n สําหรับ e5% 10%
500 222 831000 286 91
… … …∞ 400 100
N n(e=5%)
500 2171000 278
... ...∞ 384
Krejcie & Morgan
การกําหนดขนาดตัวอยางโดยใชตาราง
หมายเหต:ุใชในการประมาณคาสัดสวนเทาน้ัน
41
กรณีทราบจํานวนประชากร (N)
21 NeNn
+=Yamane
n = ขนาดตวัอยาง
N = ขนาดของประชากร
e = คาเปอรเซ็นตความคลาดเคลื่อนที่ยอมรับไดจากการ
ประมาณการ เชน 5% หรอื 0.05
การกําหนดขนาดตัวอยางโดยใชสูตรคํานวณ
*ใชในการประมาณคาสดัสวน และระดับความเชือ่ม่ันรอยละ 95 เทาน้ัน
42
กรณีทราบจํานวนประชากร
n = ขนาดตัวอยาง
P = สัดสวนของลักษณะที่สนใจ
e = คาความคลาดเคลือ่นจากการสุมตัวอยางเชน 5% หรอื .05
Z = คาคะแนนมาตรฐานจากการแจกแจงปกติ เชน 95% หรือ คิดเปน 1.96
ถาไมทราบคา P จะกําหนดให = 0.5
Krejcie & Morgan)1()()1(
))(1(22
2
PPZNeNpZPPn−+−
−=
การกาํหนดขนาดตัวอยางโดยใชสูตรคํานวณ
43
กรณีไมทราบจํานวนประชากร
n = ขนาดของกลุมตัวอยาง
P =สัดสวนของลักษณะท่ีสนใจในประชากร
e = คาความคลาดเคล่ือนจากการสุมตัวอยางเชน 5% หรือ .05
Z =คาคะแนนมาตรฐานจากการแจกแจงปกติ เชน 95% เทากับ 1.96
ถาไมทราบคา P จะกําหนดให = 0.5
Krejcie & Morgan 2
2))(1(e
Zppn −=
การกาํหนดขนาดตัวอยางโดยใชสูตรคํานวณ
44
กรณีทราบจํานวนประชากร
n = ขนาดตัวอยาง
N = ขนาดประชากร
e = คาความคลาดเคลือ่นจากการสุมตัวอยางเชน 5% หรอื .05
= คาความแปรปรวนของประชาการ
Z = คาคะแนนมาตรฐานจากการแจกแจงปกติ เชน ความเชื่อมั่น 95% หรือ คิดเปน 1.96
222
22
)( σσZNe
NZn+
=
การกาํหนดขนาดตัวอยางโดยใชสูตรคํานวณ
สาํหรับประมาณคาเฉลี่ย
2σ
45
กรณีไมทราบจํานวนประชากร
n = ขนาดตัวอยาง
e = คาความคลาดเคลือ่นจากการสุมตัวอยางเชน 5% หรอื .05
= คาความแปรปรวนของประชาการ
Z = คาคะแนนมาตรฐานจากการแจกแจงปกติ เชน ความเชื่อมั่น 95% หรือ คิดเปน 1.96
2
22
eZn σ
=
การกาํหนดขนาดตัวอยางโดยใชสูตรคํานวณ
สาํหรับประมาณคาเฉลี่ย
2σ
46
แผนแบบการสุมตัวอยาง
อาศัยความนาจะเปน ไมอาศัยความนาจะเปน
- สุมตัวอยางอยางงาย- สุมตัวอยางแบบมีระบบ- สุมตัวอยางแบบแบงช้ันภูมิ- สุมตัวอยางแบบกลุม- สุมตัวอยางแบบหลายขั้นตอน
- สุมตัวอยางแบบเฉพาะเจาะจง- สุมตัวอยางแบบโดยบังเอิญ- สุมตัวอยางแบบกําหนดโควตา- สุมตัวอยางแบบ Snowball
47
แผนแบบการสุมตัวอยางอยางงาย
- กลุมประชากรมีโอกาสไดรับคัดเลือกเทาๆกัน
- เหมาะกับประชากรท่ีมีลักษณะคลายคลึงกัน
วิธีสุม
จับฉลาก
ตารางเลขสุม (แถว,หลัก)
48
แผนแบบการสุมตัวอยางอยางงาย
ขอดี ขอเสยี1. สุมงาย เขาใจงาย 1. ตองมีกรอบตัวอยาง2. วิเคราะหงาย 2. คาใชจายสูง ถาหนวย
ตัวอยางอยูกระจัดกระจาย3. อาจไมพบหนวยตัวอยาง
YnY =
∑=
=n
iiy
nY
1
1
49
แผนแบบการสุมตวัอยางอยางเปนระบบ
สุมหนวยแรก และเลือกตัวอยางตอไปทุกๆ k หนวย
ตัวอยาง: การศึกษามีประชากรทั้งหมด 600 คน ขนาดของตัวอยาง 200 คน
2. สุมหาตัวเลขตั้งตนโดยจับฉลาก สมมติได 2
1. กําหนดชวงของการสุม =
k = 600200
= 3
ขนาดประชากร ขนาดของตัวอยาง
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 ... ... 600
50
แผนแบบการสุมตัวอยางอยางมีระบบ
ขอดี ขอเสีย1. สุมงาย เขาใจงาย 1. ตองทราบ N2. วิเคราะหงาย เหมือนสุมอยางงาย
2. อาจเกิดความเอนเอียงถาจัดเรียงตัวอยางไมดี
3. ตัวอยางกระจาย
51
ลักษณะของประชากรที่ตองการศึกษามีความแตกตางกัน
จึงตองจัดแบงประชากรออกเปนกลุมๆ แตละกลุมมีลกัษณะ
ใกลเคียงกนั แตระหวางกลุมมีลกัษณะตางกัน
ขอดีของการสุมตัวอยางแบบแบงช้ันภูมิ คือ จะไดตัวอยาง
จากกลุมตางๆ ของประชากรครบทุกกลุม
A B Cประชากรที่
ใชประเมินผล
52
แผนแบบการสุมตัวอยางแบบแบงชั้นภูมิ
สุมแบบไมเปนสัดสวน
A B C
53
สุมแบบเปนสัดสวนCBA
54
แผนแบบการสุมตัวอยางแบบแบงช้ันภมูิ
ขอดี ขอเสยี1. ลดความแปรปรวน 1. ยุงยาก ซบัซอน ใน
การสุม2. ตัวอยางมีทุกลกัษณะท่ีตองการ
2. การคํานวณคาผลรวมและคาเฉลี่ย ตางกบัสุมอยางงาย
...332211 YnYnYnY ++=
321 nnnYY++
=
55
ตรงขามกับแบบแบงช้ันภูมิ – ลักษณะของประชากรในกลุมแตกตางกัน (เสมือนประชากรยอสวน)
ประชากรแตละกลุมมีลักษณะคลายคลึงกันจึงเลือกสุม
ตัวอยางจากเพียงบางกลุมก็พอแลว
A CB
แผนแบบการสุมตัวอยางแบบแบงกลุม
56
-เตรียมรายช่ือไมไหว-สุมแบบงาย/แบงช้ันภูมิส้ินเปลือง
แผนแบบการสุมตัวอยางแบบแบงกลุม
ขอดี ขอเสีย1. สะดวกไมตองมีกรอบ 1. จํานวนหนวยตัวอยาง
ขึ้นกับกลุมที่สุมได2. คาใชจายนอย 2. การคํานวณคาผลรวมและ
คาเฉลี่ย ยุงยาก
57
แผนแบบการสุมตัวอยางแบบแบงกลุม G1 G2 G3 G4
2 14 14 28
4 5 33 9
3 14 8 9
10 8 33 8
5 18 21 27
24 59 109 81 273
25.684
273==Y 365,125.68*20 === YGY
สุม 4 กลุม
จาก G 20
กลุม
58
กรณีประชากรมีขนาดใหญ และสามารถแบงประชากรออกเปน
กลุมๆ ได แตละกลุมยังสามารถแบงออกเปนกลุมยอยๆ ไดอีก
ใชแผนแบบการสุมตัวอยางผสมผสานกัน
แผนแบบการสุมตัวอยางแบบหลายขั้นตอน
ขอดี ขอเสีย1. ไมตองมีกรอบตัวอยาง 1. หนวยตัวอยางแตละขั้น
ตางกัน2. ขอดีขึ้นกับวิธีการเลือกแตละขั้น
2. การคํานวณคาผลรวมและคาเฉลี่ย ยุงยาก3. คาใชจายเดินทางสูง
59
5 ภาค
ภาคละ 2 จังหวัด = 10 จังหวัด
หมูบานละ 2 ครัวเรือน = 160 ครัวเรือน
เลือกจังหวัดละ 1 อาํเภอ = 10 อําเภอ
อําเภอละ 2 ตําบล = 40 ตําบล
ตําบลละ 2 หมูบาน = 80 หมูบาน
สุมแบบแบงชัน้ภูมิ
สุมแบบแบงกลุม
เน่ืองจากผูประเมินผล
พบวาเกษตรกรแตละ
อําเภอคลายคลึงกัน
สุมอยางงาย
60
การสุมตวัอยางแบบไมอาศยัความนาจะปน
การเลือกตัวอยางตามความสะดวก เชน การสุมตัวอยางในการประเมินนิทรรศการ
การเลือกตัวอยางโดยใชวิจารณญาณ ใชกลุมเปาหมายที่ใหขอมูลได เชน ผูบริหาร
การเลือกตัวอยางแบบโควตา คํานวณสัดสวนตอจํานวนประชากร เชน เกษตรกร : สหกรณ (60 : 40)
การเลือกตัวอยางแบบ Snowball หรือ Chain ใชในกรณีที่ประชากรที่เปนตัวอยางหายาก เชน คนพเนจร
61
1. แบบสังเกต2. แบบตรวจสอบรายการ3. แบบสัมภาษณ4. แบบใชแบบสอบถาม5. แบบมาตรประเมิน6. แบบทดสอบ
เคร่ืองมือท่ีใชในการเก็บรวบรวมขอมูล
เครื่องมอืที่ดีตองวัดได
ตรงกับตัวชีว้ัด
62
แบบมีสวนรวม แบบไมมสีวนรวม
- ไดขอมลูที่เปนจริง
- กรณีใชเครื่องมอือืน่ไมได
- ใชเวลานาน
- ไดขอมลูตัวอยางครั้งละไมมาก
- ตองเชี่ยวชาญและฝกฝน
แบบสังเกต
- เปนสวนหนึ่งของกลุม
- ฝงตัวสงัเกตการณ
- ผูสังเกตไมไดเขารวมกิจกรรม
- ทําตนเปนบุคคลภายนอก
63
• กําหนดส่ิงท่ีจะทําการตรวจสอบใหชัดเจน• กําหนดกิจกรรมตามวัถุประสงคใหครบถวน• เรยีงขอความตามกิจกรรมแรกไปหากิจกรรม
สุดทายตามวัตถุประสงค• เขยีนคําช้ีแจงอธิบายวิธีการตรวจสอบรายการให
ชัดเจน
แบบตรวจสอบรายการ
64
ไมมีโครงสราง
• ไมต้ังคําถามไวลวงหนา
• ไมตองใชคําถามเดียวกัน
• ผูสมัภาษณควรมีประสบการณ
มีโครงสราง
• ต้ังคําถามไวลวงหนา
• ใชคําถามเหมือนกันหมด
• เหมาะกับผูสัมภาษณประสบการณนอย
แบบสัมภาษณ
สนทนา
สวนที่ 1 คําช้ีแจง
สวนที่ 2 ขอมูลพื้นฐาน
สวนที่ 3 เน้ือหา
แบบปลายเปด
แบบปลายปด
แบบผสม
ลักษณะแบบสอบถามสวนประกอบ
แบบสอบถาม
อานเอง
66
ใชประเมินคา/คุณลักษณะตางๆ ที่ไมสามารถวัดเปนตัวเลข
โดยตรงได แบงเปน 2 ประเภท คือ
1. มาตรวัดแบบบรรยาย เชน พึงพอใจมาก ปานกลาง นอย
2. มาตรวัดแบบตัวเลข เชน ระดับ 3 ระดับ 2 ระดับ 1
แบบมาตรประเมินคา
67
1. มาตรประเมินคาแบบ Likert
คือ มาตรประเมินคาแบบบรรยายและตัวเลข
เชน ระดับ 3 = เห็นดวยมาก ระดับ 2 = ปานกลาง และระดับ 1 = นอย
2. มาตรประเมินคาแบบ Rubric
คือ มาตรประเมินคาแบบตัวเลข และตองกําหนดเกณฑที่ใช
ประกอบกับคะแนนแตละระดับ เชน เกณฑ กพร.
เชน ระดับ 5 ปรากฎคุณลักษณะเดน มีผลงานครบ/เขาใจ
ระดบั 1 ไมปรากฎคุณลักษณะเดน ไมมีผลงานครบ/เขาใจ P150
แบบมาตรประเมินคาท่ีนิยม
68
แบบอัตนัย
แบบปรนยั
แบบเติมคําแบบจับคู
แบบเลือกตอบ
แบบทดสอบ
69
1. เก็บขอมูลไดตรงตามวัตถุประสงค
2. เนื้อหา ถอยคํา ลําดับคําถาม ความเขาใจงาย?3. รวบรวมคําตอบที่เปนไปได
4. ระยะเวลาการเก็บขอมูล
5. คําถามที่ผูใหขอมูลไมตอบ ไมทราบ หรือไมเขาใจ
6. มีตัวเลือกที่ถูกมากกวา 1 ตัวเลือก
การตรวจสอบคุณภาพเครื่องมือ (Pre-testing)
70
เพ่ือทดสองคุณภาพเครื่องมอืโดยการทดสอบความตรงและความเที่ยง
กอนนําเครื่องมือตางๆเหลานี้ไปใช
1. แบบสอบถาม
2. แบบสัมภาษณ
3. แบบสังเกต
4. แบบทดสอบ
การตรวจสอบคุณภาพเครื่องมือ (Pre-testing)
71
1. แบบสอบถาม (ทดสอบความตรงตามเนื้อหา)
- ใหผูเชี่ยวชาญอยางนอย 3 คน เปนผูประเมิน
ถาขอคําถามวัดไดตรงจุดประสงคได +1 คะแนน
ถาไมแนใจวาขอคาํถามนัน้วดัตรงจุดประสงคหรอืไม ได 0 คะแนน
ถาขอคาํถามวดัไดไมตรงจุดประสงค ได -1 คะแนน
- ทดสอบกับกลุมตวัอยาง โดยใชสตูร
เกณฑการคัดเลือก
1) คา IOC ตั้งแต 0.5 – 1.00 คัดเลอืกไวใชได
2) คา IOC ต่ํากวา 0.5 ควรพิจารณาปรับปรุงใหมหรือตัดทิ้ง
การตรวจสอบคุณภาพเครื่องมือ
---P155
ความตรง (Validity) ตรงตามเนื้อหาขอมูลที่ตองการจะเก็บ?
R=คะแนนความเห็น ผชช. N=จาํนวนผชช.
72
1. แบบสอบถาม (ทดสอบความเที่ยง)
ถามกี่ครั้งกบัคนเดิม ก็ไดผลเหมือนเดิม
−
−= ∑
2
2
11 t
i
SS
nnα
=n=2
iS=2
tS
จาํนวนคาํถาม
ความแปรปรวนของคะแนนแตละขอ
ความแปรปรวนของคะแนนทัง้หมด
การตรวจสอบคุณภาพเครื่องมือ
ความเที่ยง (Reliability) เมื่อเพ่ิม n ผลทีไ่ด/ขอมูลที่ได ไมเปลี่ยนมากนัก
---P158
ยอมรับที่ 0.16.0 −=α
73
2. แบบสัมภาษณ
วิธีการทดสอบความตรงและความเท่ียงใชวิธีเดียวกับ แบบสอบถาม
การตรวจสอบคุณภาพเครื่องมือ
74
3. แบบสังเกต
1. ทดสอบความตรง โดยใหผูเชี่ยวชาญทดสอบความถูกตองของ
เน้ือหา
2. ทดสอบความเที่ยง โดย
- ใหผูสังเกตคนหน่ึงสังเกตพฤตกิรรมหน่ึงๆในเวลาทีต่างกัน หรือ
- ใหผูสังเกตหลายคนสงัเกตพฤตกิรรมเดียวกันของคนเดียวกัน
แลวนําขอมูลมาทดสอบคาสัมประสิทธ์ิสหสัมพันธ
การตรวจสอบคุณภาพเครื่องมือ
ความเที่ยง (Reliability) เมื่อเพ่ิม n ผลทีไ่ด/ขอมูลที่ได ไมเปลี่ยนมากนัก
ความตรง (Validity) ตรงตามเนื้อหาขอมูลที่ตองการจะเก็บ?
---P160 75
4. แบบทดสอบ (ทดสอบความตรง)
ไดแก เนื้อหา เชิงโครงสราง สภาพปจจุบัน เชิงพยากรณ
แบบทดสอบ (ทดสอบความเทีย่ง) เชน
4.1 วิธีสอบซ้าํ เพื่อหาคาสัมประสิทธิส์หสัมพนัธโดยใชสูตรของ
Pearson Product Moment Correlation (ยอมรับ เมื่อ rxy >0.7)
4.2 วิธีแบงคร่ึงขอสอบ (เชนครึ่งบน-ลาง หรือ เลขคู-คี่)
4.3 วิธีของคูเดอร – ริชารดสนั วดัในระดับอันตรภาคเทานั้น
ใชสูตร
การตรวจสอบคุณภาพเครื่องมือ
---P163
---P165
---P168
76
4. แบบทดสอบ (การวิเคราะหขอสอบรายขอ)
- วิเคราะหความยากงาย
คาที่ยอมรับไดอยูระหวาง 0.2 – 0.8
- วิเคราะหอํานาจจาํแนก (r) คาที่บอกวาขอสอบนั้นแยกคนเกงกับไมเกงไดแคไหน มีเกณฑในการตัดสินใจ คือ
r > 0.4 ดีมาก
r ระหวาง 0.30 – 0.39 ดี
r ระหวาง 0.20 – 0.29 ควรปรับปรุงใหม
r < 0.20 ตัดขอสอบทิ้ง
ความยากงายของแบบทดสอบ =จํานวนคนที่ตอบถูกตองทั้งหมดจํานวนคนทีเ่ขาสอบทั้งหมด
การตรวจสอบคุณภาพเครื่องมือ
---P170
77
สถิติพรรณนา (Descriptive Statistics)
สถิติอนมุาน หรือ สถิติอางอิง
(Inferential Statistics)
การเลือกใชสถิติที่เหมาะสมกับมาตรวัด
78
สถิติพรรณนา (Descriptive Statistics)
สถิติท่ีใชพรรณนาหรือบรรยายใหเหน็ภาพ
ลักษณะ หรือคุณสมบัติของส่ิงท่ีติดตาม
หรือประเมินผลส่ิงนั้นอาจเปนประชากร
หรือกลุมตัวอยางก็ได
เชน การแจกแจงความถี่ รอยละ
การวัดความกระจาย
79
สถิติอนมุาน (Inferential Statistics)
รวบรวมขอมูลจากกลุมตัวอยาง วิเคราะหขอมูลจาก
กลุมตัวอยางน้ัน แลวสรุปผลการวิเคราะหไปสูกลุม
ประชากรเปาหมาย เพ่ือดูความแตกตางหรอื
ความสัมพันธกับเกณฑที่กําหนดไว
เชน Chi-square t–test Z-test F-test ANOVA การ
ประมาณคาพารามิเตอรตางๆ
กลุมตัวอยางอางอิง
ประชากร
80
กลุมประชากร Population
คาพารามิเตอร Parameter
คาสถติิ
Statistic
กลุมตัวอยางSample
สุมตัวอยาง
สถิติพรรณา
Descriptive statistics
สถิติอางอิง
Inferential statistics
81
มาตรวัด นามบญัญัติ
เรียงอันดับ
อันตรภาคช้ัน
อัตราสวน
สถิติพรรณนา
สถิติอางอิง สถิติ
82
มาตรวัดที่ใชกบัสถิติพรรณนา
ความถี่ รอยละ
ฐานนิยม
พิสัย ฐานนิยม
มัธยฐาน คาเฉลี่ยคาเบี่ยงเบนมาตรฐาน
ขอมูลนามบัญญตั ิ(Nominal)
ขอมูลเรียงอันดับ (Ordinal) }ขอมูลอันตรภาค (Interval)
ขอมูลอัตราสวน (Ratio) }
83
มาตรวัดที่ใชกบัสถิติอนุมาน
Chi-square test ( χ2 )(Non-Parametric)
t–test z–test F–test ANOVA
(Parametric)
ขอมูลนามบัญญัติ (Nominal)
ขอมูลเรียงอันดับ (Ordinal) }ขอมูลอันตรภาค (Interval)
ขอมูลอัตราสวน (Ratio) }
84
เพศ =
ระดับการศึกษา =
อายุ =
อาชีพ =
รายได =
ระดับความคิดเห็น =
เม่ือไรถึงจะใชการแจกแจงแบบไหน !
Nominal
Ordinal
Ratio
Nominal
Ratio
Ordinal
Chi-square test ( χ2 )
Chi-square test ( χ2 )t-test, Z-test
Chi-square test ( χ2 )t-test, Z-test
Chi-square test ( χ2 )
85
การแจกแจงความถี่รอยละ
วดัการกระจายพิสัย สวนเบีย่งเบน
มาตรฐาน
วัดแนวโนมเขาสูสวนกลางฐานนิยม มัธยฐาน คาเฉลี่ย
สถิติพรรณนา สถิติอางอิง
การทดสอบสมมตฐิาน
Chi-square test
Z-test, t-test
Logit Model
Structural Equation Model
สถิติที่ใชในการวิเคราะหขอมูล
Regression Analysis
86
วตัถปุระสงค\
ผลได\ผลกระทบประเด็น
ที่จะประเมิน กําหนดตัวช้ีวัดในแตละประเดน็
สรางเคร่ืองมือ\สถิติที่จะวิเคราะห
เก็บรวบรวมวิเคราะหขอมูล
เทียบเกณฑ
สรุป\ตัดสิน
87
