Upload
others
View
5
Download
0
Embed Size (px)
Citation preview
รายงานผลการวจย
เรอง
ระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน
Quality Analysis and Evaluation System of Online Examination
โดย ฐากร พฤกษวนประสต และ อรวรรณ อมสมบต
รายงานการวจยนไดรบทนอดหนนจากมหาวทยาลยธรกจบณฑตย พ.ศ. 2556
DPU
ก
ชอเรอง ระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน ผวจย ฐากร พฤกษวนประสต และ อรวรรณ อมสมบต ปทพมพ 2556 ค าส าคญ แบบทดสอบออนไลน , การวเคราะหและการประเมนคณภาพ
แบบทดสอบ
บทคดยอ ในปจจบนไดมการประยกตใชเทคโนโลยคอมพวเตอรมาชวยในการจดท าธนาคารขอ
ทดสอบ และแบบทดสอบออนไลนมากขน ซงชวยใหสามารถเกบขอทดสอบไดเปนจ านวนมาก และมความสะดวกรวดเรวในการสรางแบบทดสอบชดใหมตามทตองการ อยางไรกตามควรมการวเคราะหและประเมนคณภาพของแบบทดสอบเพอเปนการตรวจสอบคณภาพ และความถกตองของขอสอบ อกทงยงชวยใหทราบถงภาพรวมของความสามารถของผเรยน และสามารถน าไปเปนแนวทางในการพฒนาการเรยนการสอนใหมประสทธมากยงขนได
งานวจยนจงน าเสนอระบบการวเคราะหและประเมนคณภาพของแบบทดสอบออนไลน โดยเปนการวเคราะหแบบประเมนทกษะดานเทคโนโลยสารสนเทศ เพอตรวจสอบคณภาพและความนาเชอถอของแบบทดสอบ โดยด าเนนการวจยดวยการพฒนาโปรแกรมดวยภาษา พเอชพ (PHP) และใชโปรแกรมจดการฐานขอมลเอสควแอลเซรฟเวอร (SQL Server) ในการจดเกบขอมลการท าแบบทดสอบออนไลนของนกศกษา และน าขอมลทไดมาวเคราะหเพอประเมนคณภาพของแบบทดสอบใน 3 ประเดน คอ ความเชอมน (Reliability) ความยากงาย (Difficulty) และอ านาจจ าแนก (Discrimination) และพฒนาระบบเพอน าเสนอผลประเมนในรปแบบตารางและกราฟทอาจารยสามารถสบคนขอมลไดตามตองการ และอาจารยสามารถปรบเกณฑในการสมเลอกขอสอบใหมไดตามระดบความยากงายเพอความยตธรรมของแบบทดสอบแตละชด
จากผลการวจยพบวาแบบทดสอบออนไลนส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศเปนแบบทดสอบมคาความเชอมนทเหมาะสม (0.96) หรอมความคงทของผลการวด และโดยเฉลยขอสอบมคาอ านาจจ าแนกอยในระดบดมาก (0.87) หรอสามารถจ าแนกผเรยนออกเปนกลมตางๆไดอยางด และเมอพจารณาคณสมบตดานความยากงายพบวาโดยเฉลยขอสอบถกจ าแนกอยในระดบคอนขางยาก (0.34) เนองจากขอสอบมความหลากหลายของค าถาม ทงทเปนค าศพทพนฐานและค าศพทเทคนค อกทงยงมขอสอบแบบปฏบตซงตองมการปฏบตหลายขนตอนเพอใหไดผลลพธตามทโจทยก าหนด ทงนระดบความยากของขอสอบอาจเกดจากคณสมบตของขอสอบเอง รวมถงความพรอมในการสอบและความแตกตางของผเขารบการทดสอบดวย
DPU
ข
นอกจากนในงานวจยชนนยงไดเสนอแนะการปรบปรงคณภาพของแบบทดสอบโดยการวเคราะหคาความยากงายเฉลยของแบบทดสอบแตละชดทผเขารบการทดสอบไดรบซงเปนขอสอบทเกดจากการสมเลอก ซงพบวาแบบทดสอบบางชดมระดบความยากงายอยในระดบคอนขางยากในขณะทแบบทดสอบบางชดอยในระดบปานกลางเทานนซงไมยตธรรมส าหรบผเขารบการทดสอบ ผวจยจงน าเสนอวธการปรบการสมเลอกขอสอบตามอตราสวนระดบความยากงาย และผลการวเคราะหดวยคาสถต t-test พบวาการสมเลอกแบบใหมมคาความแตกตางของระดบความยากงายลดลงกวาการสมแบบเดมอยางมนยส าคญทางสถตทระดบ 0.05 และท าใหเชอมนไดวาแบบทดสอบทไดจากการสมเลอกแบบใหมเปนแบบทดสอบทมคาความยากงายเฉลยอยในระดบเดยวกน
DPU
ค
Title Analysis and Evaluation System for Quality of Online Examination Researcher Takorn Prexawanprasut and Aurawan Imsombut Year of Publication 2013 Keywords Online examination, Analysis and Evaluation System for Quality of
Examination
ABSTRACT The information technology has been implemented for examination test bank
including online assessment system. This can lead to collection of large amount of test suite. It also facilitates to create the assessment sets when the test was requested. However, the analysis and the evaluation for test quality are needed for quality control and correctness of the test. In additions, the quality can determine learner’s abilities and can be applied as a guideline for improving the efficiency of the teaching development.
This research proposes the analysis and the evaluation system for quality of the online examination. The examination was focused on the assessment of information technology subjects in order to measure the quality and reliability of the test suite. The research methodology is a development of online assessment application based on PHP using SQL Server as a database management system. The data was collected from student’s examination and was used to analyze for quality evaluation of the examination sets in 3 aspects which are reliability, difficulty and discrimination. After that, the system showed the result in graphical and tabular forms. The instructor can change the random criteria according to the test difficulties for improving more appropriate new test suite.
The research results show that the online information technology examination has a suitable reliability (0.96) or it has a stable measurement. On the average, the test has a good discrimination (0.87) or it can classify the learner into appropriate different groups. When considering the difficulty property, on the average, the test is classified to quite difficult level (0.34) because there are many various questions including foundation terms and technical terms. Moreover, it contains practical examinations which have many steps to satisfy the questions. However, the difficulty level of the test may be due to the properties of the test itself and also the preparedness and the differences of the examinees.
DPU
ง
In addition, this research also proposes the methodology to improve the test quality. By analyzing the average difficulty of each random test set, we found that some test sets are in the quite difficult level while some test sets are in the medium difficult level. There is an inequality for examinees. Therefore, this research proposed the methodology for adjusting of random criteria selection regarding to the difficulty of test level. The results using t-test were presented that the difference of the difficulty level would be decreased with significant level at 0.05. It can conclude that each test suite from the proposed method has the similar level of difficulty simultaneously.
DPU
จ
กตตกรรมประกาศ
งานวจยฉบบนส าเรจลลวงไดอยางสมบรณ โดยไดรบความอนเคราะหอยางดยงจาก
รองศาสตราจารย ดร.สรชย พศาลบตร ทปรกษารองอธการบดฝายวจย และรองศาสตราจารย
ดร.นชร เปรมชยสวสด คณบดคณะเทคโนโลยสารสนเทศ ซงไดเสยสละเวลาอนมคาให
ค าแนะน าถงแนวทางตางๆในการวจย การคนควาหาขอมลเพมเตม รวมทงชแนะแนวทางในการ
แกปญหาอนเปนประโยชนในการวเคราะหและสรปผลการวจยใหสมบรณมากยงขน
ขอขอบคณ ดร.อรวรรณ อมสมบต ผรวมวจย ทชวยพฒนาระบบการประเมนคณภาพ
แบบทดสอบออนไลนน รวมวเคราะหและสรปผลการวจย
ขอขอบคณมหาวทยาลยธรกจบณฑตยทใหทนสนบสนนในการท าวจยในครงน และ
ขอขอบคณศนยเตรยมความพรอมเพอการท างาน และคณาจารยคณะเทคโนโลยสารสนเทศทกทานท
ไดใหความรวมมอในการท าวจยในครงน
นอกจากน ขอขอบพระคณครอบครว และเพอนๆทใหก าลงใจในการท าวจยน
ผว จยหวงเปนอยางย งวา งานวจยนจะเปนประโยชนกบผท ตองการศกษาดานการ
วเคราะหและการประเมนคณภาพแบบทดสอบออนไลน และหากมขอผดพลาดประการใดใน
งานวจยฉบบน ผวจยตองกราบขออภยเปนอยางสงมา ณ ทนดวย
ฐากร พฤกษวนประสต
หวหนาโครงการ
พฤศจกายน 2556 DPU
ฉ
สารบญ
หนา บทคดยอภาษาไทย.................................................................................................................. ก บทคดยอภาษาองกฤษ............................................................................................................. ค กตตกรรมประกาศ................................................................................................................... จ สารบญ.................................................................................................................................... ฉ สารบญตาราง.......................................................................................................................... ซ สารบญภาพ............................................................................................................................. ญ บทท 1. บทน า......................................................................................................................... 1 1.1 ความเปนมาของปญหา........................................................................................ 1 1.2 วตถประสงค........................................................................................................ 2 1.3 สมมตฐานงานวจย............................................................................................... 2 1.4 ขอบเขตของงานวจย............................................................................................ 2 1.5 ระยะเวลาและแผนการด าเนนงานท าการวจย...................................................... 2 1.6 ประโยชนทคาดวาจะไดรบ................................................................................. 1.7 นยามค าศพท.......................................................................................................
3 4
2. แนวคด ทฤษฏ และงานวจยทเกยวของ.................................................................... 5 2.1 ธนาคารขอทดสอบและแบบทดสอบออนไลน................................................... 5 2.2 การประเมนคณภาพของขอสอบ และแบบทดสอบ............................................. 8 2.3 การทดสอบสมมตฐานโดยใช t-test..................................................................... 11 2.4 การพฒนาระบบสารสนเทศ................................................................................ 13 2.5 การจดการฐานขอมล........................................................................................... 15 2.6 งานวจยทเกยวของ............................................................................................... 17 3. ระเบยบวธวจย............................................................................................................ 20 3.1 ระเบยบวธวจย..................................................................................................... 20 3.2 การก าหนดประชากร และกลมตวอยาง............................................................... 22 3.3 การพฒนาเครองมอทใชในการวจย..................................................................... 23 3.4 การวเคราะหขอมล.............................................................................................. 35
DPU
ช
สารบญ (ตอ)
บทท หนา 4. ผลการวจย.................................................................................................................. 38 4.1 ผลการพฒนาระบบ............................................................................................. 38 4.2 ผลการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน......................... 46 4.3 การปรบปรงการสมเลอกค าถาม และการทดสอบสมมตฐาน……………...…... 52 5. สรปผลการวจย........................................................................................................... 57 5.1 สรปผลการวจย.................................................................................................... 57 5.2 อภปรายผลการศกษา........................................................................................... 58 5.3 ขอเสนอแนะ........................................................................................................ 60 บรรณานกรม........................................................................................................................... 61 ประวตผวจย............................................................................................................................ 65
DPU
ซ
สารบญตาราง
ตารางท หนา 1.1 ระยะเวลาการด าเนนงานการวจย........................................................................... 3 2.1 ตารางแสดงการวเคราะหคาเฉลยของจ านวนขอสอบทระบบสมมาซ ากน
ในการสอบสองครง............................................................................................... 7
3.1 ขอมลแบบประเมนทกษะดานเทคโนโลยสารสนเทศ............................................ 22 3.2 ขอมลจ านวนครงในการทดสอบแยกตามภาคเรยน............................................... 23 3.3 ตารางแสดงรายละเอยดเหตการณเขาสระบบ……................................................ 25 3.4 ตารางแสดงรายละเอยดเหตการณการจดการขอมลหลกตางๆ............................... 26 3.5 ตารางแสดงรายละเอยดเหตการณการจดการแบบทดสอบ.................................... 27 3.6 ตารางแสดงรายละเอยดเหตการณการท าแบบทดสอบ…....................................... 28 3.7 ตารางแสดงรายละเอยดเหตการณการดรายงานผลการวเคราะหคณภาพ
แบบทดสอบ…………………………………………………………………...... 29
3.8 ตาราง ExitTestUser (ขอมลผใช)........................................................................... 31 3.9 ตาราง Exam (การสอบ)......................................................................................... 31 3.10 ตาราง Question (ค าถาม). ..................................................................................... 32 3.11 ตาราง Choice (ตวเลอก)........................................................................................ 32 3.12 ตาราง History (ประวตการสอบ)........................................................................... 33 3.13 ตาราง Approve (การอนมต).................................................................................. 33 3.14 ตาราง Title (หวขอขอสอบ)…............................................................................... 33 3.15 ตาราง Level (ระดบของค าถาม)……..................................................................... 34 3.16 ตาราง Faculty (คณะ)............................................................................................. 34 3.17 ตาราง Department (สาขาวชา)............................................................................... 34 3.18 ตาราง Role (บทบาทของผใช)............................................................................... 34 3.19 ตาราง Group (กลมของอาจารย)............................................................................ 34 3.20 ตาราง Status (สถานะของขอสอบ)........................................................................ 35
DPU
ฌ
สารบญตาราง (ตอ)
ตารางท หนา 3.21 ตาราง Type (ประเภทขอสอบ)............................................................................... 35 4.1 ขอมลแบบประเมนทกษะดานเทคโนโลยสารสนเทศ............................................ 46 4.2 จ านวนการทดสอบทกษะดานเทคโนโลยสารสนเทศ............................................ 46 4.3 จ านวนผทสอบผานแบบทดสอบ........................................................................... 47 4.4 เกรดในรายวชา IT206 ของนกศกษาทเขาทดสอบ………………………………. 47 4.5 ผลการวเคราะหความยากงายโดยจ าแนกตามชวงความยากงาย…………………. 48 4.6 ผลการวเคราะหความยากงายโดยสรป................................................................... 49 4.7 ผลการวเคราะหขอสอบทอยในกลมยาก................................................................ 50 4.8 ผลการวเคราะหอ านาจจ าแนก................................................................................ 51 4.9 คาความยากงายของขอสอบทถกสมเลอกกอนมการปรบคาการสม....................... 53 4.10 อตราสวนการสมเลอกขอสอบในแตละหวขอจ าแนกตามคาความยากงาย............ 53 4.11 ความแตกตางของคาความยากงายของชดขอสอบหลงการปรบคาการสม............ 54 4.12 คาสถตการทดสอบความเปนอสระตอกนของขอมล 2 กลม (Independent
Samples Test)........................................................................................................ 55
4.13 คาสถตในการทดสอบเปรยบเทยบความแตกตางของคาความยากงายเฉลยของการสม 2 แบบ........................................................................................................
56
DPU
ญ
สารบญภาพ ภาพท หนา 2.1 วงจรการพฒนาระบบงาน (System Development Life Cycle: SDLC)….............. 14 3.1 สถาปตยกรรมของระบบ........................................................................................ 20 3.2 แผนภาพยสเคสของระบบการวเคราะหและการประเมนคณภาพแบบทดสอบ
ออนไลน................................................................................................................ 24
3.3 แผนภาพออารของระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน................................................................................................................
30
4.1 หนาจอเขาสระบบ.................................................................................................. 39 4.2 หนาจอแสดงขอผดพลาดในการเขาสระบบ........................................................... 39 4.3 หนาจอหลกในการท างาน...................................................................................... 40 4.4 หนาจอแสดงเมนยอยการออกรายงาน.................................................................... 40 4.5 หนาจอแสดงขอมลการวเคราะหความเชอมนของแบบทดสอบ............................ 41 4.6 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยแสดง
รายขอสอบ (ทกขอ)............................................................................................... 42
4.7 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยแสดง รายขอสอบ (เฉพาะหวขอทตองการ).....................................................................
42
4.8 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยจ าแนกตามหวขอ.....................................................................................................................
43
4.9 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยสบคนตามระดบความยากงาย................................................................................................
43
4.10 หนาจอแสดงกราฟจ าแนกสถตการตอบค าถามของนกศกษาในขอค าตอบทงหมด...................................................................................................................
44
4.11 หนาจอแสดงขอมลอ านาจจ าแนกของแบบทดสอบ (รายขอสอบ)…………......... 45 4.12 หนาจอแสดงขอมลอ านาจจ าแนกของแบบทดสอบ (ตามหวขอ)……..……......... 45
DPU
บทท 1 บทน า
1.1 ความเปนมาของปญหา กลยทธทส าคญกลยทธหนงของมหาวทยาลยธรกจบณฑตยคอการผลตบณฑตทมความรความสามารถ มคณลกษณะพงประสงคและมทกษะตามความตองการของผจางงานและสงคม โดยมการก าหนดแผนงานใหมการจดกจกรรมทงในรายวชาและกจกรรมเสรมหลกสตรทสนบสนนการเรยนรสการปฏบต ท งดานกระบวนการในการบรณาการ และใหทกษะทจ าเปนส าหรบการประกอบอาชพ อกทงก าหนดใหรอยละของจ านวนผส าเรจการศกษาทเขารบการประเมน 3 ทกษะ (ภาษาองกฤษ เทคโนโลยสารสนเทศ และบรหารธรกจ) ตอจ านวนนกศกษาทส าเรจการศกษาในปทประเมนเปนตวบงชความส าเรจ ดงนนมหาวทยาลยจงสนบสนนใหนกศกษาทกคนเขาประเมนความพรอมฯในทกษะทง 3 ดาน ดวยแบบประเมนทจดท าโดย สถาบนภาษา คณะเทคโนโลยสารสนเทศ และคณะบรหารธรกจ ซงไดมการจดท าเปนคลงขอสอบ และมการสมขอสอบเพอทดสอบนกศกษาตามจ านวนทก าหนด หากนกศกษาสอบผานตามเกณฑทก าหนดจะไดรบใบประกาศการสอบผานทกษะในดานนนๆ ในระดบตางๆ อยางไรกตามยงไมเคยมการวเคราะหและประเมนคณภาพของแบบทดสอบออนไลนทใชในการประเมนทกษะของนกศกษา ซงแบบทดสอบถอเปนเครองมอทส าคญทใชในการวดคณสมบตของนกศกษา ดงนนแบบทดสอบจะตองมคณภาพเหมาะสมเพยงพอทจะสามารถจ าแนกความสามารถของนกศกษาได โดยการวเคราะหและประเมนคณภาพของแบบทดสอบนอกจากจะเปนการตรวจสอบคณภาพ ความเหมาะสม และความถกตองของขอสอบแลว ยงชวยใหทราบถงภาพรวมของความร ความเขาใจ และความสามารถของนกศกษาทเขาทดสอบ และสามารถน าไปเปนแนวทางในการพฒนาการเรยนการสอนใหมประสทธมากยงขนได งานวจยนจงน าเสนอระบบการวเคราะหและประเมนคณภาพของแบบทดสอบออนไลน โดยเนนทแบบประเมนทกษะดานเทคโนโลยสารสนเทศ เพอเปนการตรวจสอบคณภาพและความนาเชอถอของแบบทดสอบ และท าใหสามารถเชอมนไดวานกศกษาทสอบผานการประเมนความพรอมฯ จะเปนบณฑตทมทกษะทตองการอยางแทจรง
DPU
2
1.2 วตถประสงค 1. เพอพฒนาระบบการวเคราะหและประเมนแบบทดสอบออนไลน 2. เพอวเคราะหและประเมนคณภาพของแบบทดสอบออนไลน ทใชประเมนทกษะดานเทคโนโลยสารสนเทศ ในประเดนทเกยวกบความเชอมน ความยากงายและอ านาจจ าแนก 3. เพอใชเปนขอมลส าหรบการปรบปรงแบบทดสอบทกษะดานเทคโนโลยสารสนเทศใหมคณภาพและความเหมาะสม 1.3 สมมตฐานงานวจย
แบบทดสอบออนไลนทใชประเมนทกษะดานเทคโนโลยสารสนเทศ เปนแบบทดสอบทมคณภาพ โดยมคณสมบตดงน 1. มคาสมประสทธความเชอมน ไมต ากวา 0.60 2. มคาความยากงาย อยในชวง 0.40 – 0.79 3. มคาอ านาจจ าแนก ไมต ากวา 0.40 1.4 ขอบเขตของงานวจย 1. แบบทดสอบทน ามาวเคราะหและประเมนจะเปนขอมลแบบทดสอบออนไลน ทใชประเมนทกษะดานเทคโนโลยสารสนเทศของศนยเตรยมความพรอมเพอการท างาน ทใชในป พ.ศ. 2554 2. ขอมลการทดสอบทน ามาวเคราะหจะเปนขอมลการทดสอบของนกศกษาทกคนทท าการทดสอบทกษะดานเทคโนโลยสารสนเทศ ในป พ.ศ. 2554
1.5 ระยะเวลาและแผนการด าเนนงานท าการวจย
ระยะเวลาและขนตอนในการด าเนนงานการท าวจย สามารถแสดงไดดงตารางท 1.1 DP
U
3
ตารางท 1.1 ระยะเวลาการด าเนนงานการท าวจย
ขนตอนการด าเนนการวจย เดอน
1 2 3 4 5 6 7 8 1. ก าหนดปญหาการวจย
2. ศกษาคนควาเอกสารและงานวจยทเกยวของ
3. ก าหนดวตถประสงคการวจยและประโยชนทจะไดรบ
4. ก าหนดสมมตฐานการวจย 5. พฒนาเครองมอในการวจย
6. รวบรวมขอมล
7. วเคราะหผลลพธและปรบปรงระบบ
8. สรปและอภปรายผล และจดท ารายงานการวจย
1.6 ประโยชนทคาดวาจะไดรบ
1.6.1 ประโยชนตอสงคม 1) สถาบนการศกษาตางๆ สามารถประยกตใชระบบการวเคราะหและประเมนผลนกบ
คลงขอสอบของแตละสถาบนได 2) ผลการวเคราะหสามารถสะทอนกระบวนการเรยนการสอนได กลาวคอ หากผล
จากการวเคราะหขอสอบท าใหพบวานกเรยนนกศกษาทสอบสวนใหญมความรผด อาจแปลไดวา ครอาจารยสอนผด หรอวธการสอนไมด ท าใหนกเรยนนกศกษาสบสน ซงจ าเปนจะตองปรบปรงการเรยนการสอน
1.6.2 ประโยชนตอมหาวทยาลย 1) ไดระบบวเคราะหและประเมนคณภาพแบบทดสอบ 2) ไดแบบทดสอบการประเมนทกษะดานเทคโนโลยสารสนเทศทมคณภาพและ
นาเชอถอ 3) มความเชอมนในนกศกษาทสอบผานการประเมนวาเปนบณฑตทมทกษะดาน
เทคโนโลยสารสนเทศอยางแทจรง
DPU
4
4) สรางชอเสยงใหกบมหาวทยาลย เมอมบทความวจยทน าเสนอในการประชมวชาการระดบชาต และนานาชาต
1.6.3 ประโยชนตอกลมผวจย 1) ไดศกษาเทคนคการวเคราะหและประเมนแบบทดสอบ และไดพฒนาระบบการ
ประเมนคณภาพแบบทดสอบ 2) สามารถน าผลวจยมาน าเสนอในการประชมวชาการระดบชาตและนานาชาต
1.7 นยามค าศพท
การทดสอบออนไลน (Online Examination) หมายถง การทดสอบดวยเครองคอมพวเตอร ผานเครอขายอนเทอรเนต ประกอบดวยองคประกอบ 2 องคประกอบ คอ เครองมอการประเมนผล และคลงแบบทดสอบ เมอผใชท าการทดสอบแลว ระบบสามารถตรวจค าตอบและแจงคะแนนใหกบผใชไดทนท
ความเชอมน (Reliability) หมายถง ความคงทของผลการวด กลาวคอ ไมวาจะน าแบบทดสอบไปทดสอบกบผเรยนกครงกยงคงไดผลคะแนนเทาเดม
ความยากงาย (Difficulty) หมายถง ระดบความยากงายของแบบทดสอบ โดยทวไปแบบทดสอบทมคณภาพดานความยากงายพอเหมาะ ผเรยนจะตองสามารถท าไดถกตอง 50 เปอรเซนต
อ านาจจ าแนก (Discrimination) หมายถง ความสามารถของแบบทดสอบในการจ าแนกผเรยนออกเปนกลมตางๆ เชน กลมเกงและกลมออน เปนตน DP
U
บทท 2 แนวคด ทฤษฎ และงานวจยทเกยวของ
จากการศกษาทฤษฎและผลงานวจยทเกยวของกบการวเคราะหและประเมนคณภาพแบบทดสอบออนไลน พบวา สามารถสรปและแยกแยะเปนหวขอไดดงน 2.1 ธนาคารขอทดสอบและแบบทดสอบออนไลน 2.2 การประเมนคณภาพของขอสอบ และแบบทดสอบ 2.3 การทดสอบสมมตฐานโดยใช t-test 2.4 การพฒนาระบบสารสนเทศ 2.5 การจดการฐานขอมล 2.6 งานวจยทเกยวของ 2.1 ธนาคารขอทดสอบและแบบทดสอบออนไลน
เมอเทคโนโลยคอมพวเตอรในปจจบนมความสามารถและแพรหลายมากขน จงเรมมการน าเทคโนโลยดงกลาวมาประยกตใชกบงานการศกษา อาทเชน การน าคอมพวเตอรมาชวยสอน (Computer-Assisted Instrucion) การจดการเรยนการสอนออนไลน (e-learning) ในดานการทดสอบ คอมพวเตอรมประโยชนมากในการทดสอบเฉพาะรายบคคล (Tailored Testing หรอ Adaptive Testing) การสรางธนาคารขอทดสอบ (Question Banking) และการจดการสอบออนไลน (Online Testing) เปนตน โดยการประยกตใชความรดานคอมพวเตอรมาชวยในการจดท าธนาคาร ขอทดสอบจะชวยใหสามารถเกบขอทดสอบไดเปนจ านวนมาก มความปลอดภย และมความสะดวกรวดเรวในการสรางแบบทดสอบชดใหมตามวตถประสงคทตองการ การสรางธนาคารขอทดสอบจงเปนแนวคดทไดรบความนยมอยางมากในปจจบน (สพฒน สกมลสนต, 2539)
ประโยชนของธนาคารขอทดสอบ 1. ท าใหแบบทดสอบมคณภาพและนาเชอถอมากยงขน 2. พฒนาขอสอบใหมมาตรฐานสงยงขน เชน มความแมนตรง และความเชอมนมากขน 3. สามารถสรางแบบทดสอบทเหมาะสมกบกลมผสอบเปาหมายไดอยางรวดเรวและ
ถกตอง
DPU
6
4. สามารถใชขอสอบชดเดยวกนไดหลายครง และเหมาะสมกบจดมงหมายในการทดสอบไดอยางรวดเรว
5. ท าใหขอสอบมความปลอดภยจากปญหาขอทดสอบรวไหล 6. ท าใหกระบวนการทดสอบมความพรอมตลอดเวลา สามารถสรางแบบทดสอบไดทก
เวลาทตองการ 7. ประหยดทงแรงคน การเงน และสถานทในการจดเกบแบบทดสอบ
อยางไรกตามการสรางธนาคารขอทดสอบ และการสรางแบบทดสอบหรอขอสอบออนไลนนนอาจไดรบความนยมสงในชวงแรก เนองจากเปนการจดการสอบทงาย สะดวก ใชทรพยากรนอย ประหยดแรงงานคน แตกยงคงมขอวตกกงวลอยบางเนองดวยระบบการทดสอบออนไลนสวนใหญอนญาตใหมการทดสอบเมอไรกไดทผทดสอบตองการ และอนญาตใหมการทดสอบซ าไดในกรณทผทดสอบตองการทจะไดคะแนนเพม ระบบจงจ าเปนตองเกบขอสอบจ านวนมากไวในคลงขอสอบ และท าการสมขอสอบมาจ านวนหนงเพอสรางเปนแบบทดสอบของการสอบนนๆ ซงจะท าใหผเขาสอบแตละคนไดแบบทดสอบทมค าถามไมเหมอนกน ผเขาสอบคนหนงอาจสมไดค าถามทมจ านวนขอสอบทยาก มากกวาทสมไดกบอกคนหนง ท าใหยากทจะตดสนอยางเทยงธรรมวาใครเกงกวาใคร จดออนของธนาคารขอทดสอบ และการทดสอบออนไลน (สพฒน สกมลสนต, 2539; Neil C. Rowe, 2004) มดงน 1. ปญหาการรขอสอบลวงหนา เนองจากระบบใชการสมขอสอบออกมาจากคลงขอสอบ จงมความเปนไปไดวาผเขาสอบหลายๆคนอาจจ าขอสอบออกมาจากหองสอบ แลวน ามารวบรวมกนเพอท าเฉลยแลวจ าค าตอบเขาไปสอบอกครง ในการวเคราะหคาเฉลยของจ านวนขอสอบทระบบสมมาซ ากนในการสอบสองครงสามารถแสดงไดดงตารางท 2.1 โดยถาให M คอจ านวนขอสอบในแบบทดสอบหนง และ N คอจ านวนขอสอบทงหมดในคลงขอสอบ จากการศกษาพบวาผเขาสอบสองคนจะไดรบขอสอบขอเดยวกนจากการสมเปนจ านวน M * (M/N) ขอ DP
U
7
ตารางท 2.1 ตารางแสดงการวเคราะหคาเฉลยของจ านวนขอสอบทระบบสมมาซ ากนในการสอบสองครง
จ านวนขอสอบทสมมาเปนแบบทดสอบ
จ านวนขอสอบในคลงขอสอบ
คาเฉลยของจ านวนขอสอบ ทระบบสมมาซ ากน ในการสอบสองครง
5 10 2.5 10 20 5.0 20 40 10.0 30 60 15.0 40 80 20.0 5 25 1.0 10 50 2.0 20 100 4.0 30 150 6.0 40 200 8.0
ทมา: Neil C. Rowe, 2004
จ านวนขอสอบทไดรบการสมมาซ ากนจากการสอบหลายๆครง และการทผเขาสอบสามารถจดจ าขอสอบไดมากพออาจมผลตอการเปลยนแปลงผลสอบไดโดยไมตองมความรเพมขน โดยการเขาสอบหลายๆครงแลวจ าขอสอบมาท าเฉลย จากนนจงจ าค าตอบเขาไปสอบอกครง แนวทางปองกนคอจะตองมขอสอบในธนาคารขอสอบจ านวนมาก โดยถาให S คอจ านวนผเขาสอบ จ านวนขอสอบในคลงควรจะมากกวา 5 เทาของ S เพอลดการสมขอสอบซ าไมใหมบอยครงเกนไป อยางไรกตามการออกขอสอบจ านวนมากๆอาจมขอจ ากดในดานการควบคมคณภาพของขอสอบ ท าใหไมสามารถวดความรของผเขาสอบตามวตถประสงคทตองการ เนองจากขอสอบอาจมความยากงายทหลากหลายออกไป และท าใหแบบทดสอบบางชดจะงายกวาอกชดอยางชดเจน
2. การสมเลอกขอทดสอบโดยวธการสมทางสถตอาจไดขอทดสอบทไมเปนทพอใจ เชน อาจไดค าถามในบางหวขอซ ากนหลายขอ อาจไดค าถามทงายมาก หรอยากเกนไปหลายขอท าใหไมเกดความยตธรรมระหวางผเขาสอบดวยกน
DPU
8
3. ผใชอาจเกดความรสกไมมนใจในความปลอดภยของขอทดสอบจากบคคลภายนอก เชน เจาหนาทควบคมเครองคอมพวเตอร เปนตน
การแกไขจดออน อาจท าไดดงน 1. สรางขอทดสอบใหมความหลากหลาย 2. ก าหนดรหสขอทดสอบใหมความละเอยดมากพอ เชน ระดบของผทดสอบ ทกษะท
ตองการวด ระดบความยากงาย คาอ านาจจ าแนก เปนตน และพฒนาโปรแกรมคอมพวเตอรใหสามารถสมเลอกขอสอบตามคณสมบตทตองการได
3. ในการปองกนเรองความปลอดภยของขอทดสอบ ควรมการน าระบบรหสผาน และการเขารหสขอทดสอบมาใชในการท างาน 2.2 การประเมนคณภาพของขอสอบ และแบบทดสอบ
การสรางแบบทดสอบทดจ าเปนจะตองมการวเคราะหขอทดสอบรายขอเพอเปนแนวทางในการปรบปรงขอทดสอบใหมคณภาพดยงขน อกทงยงเปนการใหขอมลแกอาจารยผสอนทราบวาจดบกพรองในการเรยนการสอนอยทใด ในการวเคราะหขอทดสอบส าหรบแบบทดสอบแบบเลอกตอบ (multiple-choice test) เพอหาคณลกษณะทส าคญของขอสอบ ทนยมม 5 ประการ (สพฒน สกมลสนต, 2542) คอ
1. คาความยากงายของขอสอบ (item difficulty) เปนการวเคราะหขอสอบรายขอ เพอทดสอบวาขอทดสอบแตละขอนนมคาความยากมากนอยเพยงใด เหมาะแกการน าไปใชตอไปหรอไม
2. คาอ านาจจ าแนกของขอทดสอบ (item discrimination power) เปนการวเคราะหขอสอบรายขอ เพอพจารณาวาขอทดสอบแตละขอนนมอ านาจจ าแนกผทเรยนเกงและออนออกจากกนไดมากเพยงใด
3. ความเชอมนของแบบทดสอบ (reliability of the test) เปนการวเคราะหขอสอบทงฉบบ เพอพจารณาความคงทของผลการทดสอบ
4. ประสทธภาพของตวเลอก (effectiveness of distractors) เพอพจารณาวาตวเลอกหรอตวลวงของขอทดสอบแตละขอนนมลกษณะทดหรอไม ถาไมดจะตองปรบปรงใหดขนตอไป
5. คาสถตทวไปของแบบทดสอบ (general test statistics) เปนการพจารณาคาความเชอมนของแบบทดสอบ คาความยากของแบบทดสอบ และคาอ านาจจ าแนกโดยเฉลยของแบบทดสอบ ทงนเพอเปนแนวทางในการตดสนใจวาแบบทดสอบของเราเปนอยางไร เพอเปนแนวทางในการปรบปรงแบบทดสอบใหดขนในครงตอไป
DPU
9
โดยในงานวจยนสนใจคณสมบตของแบบทดสอบ 3 คณลกษณะ ไดแก คาความยากงายของขอสอบ คาอ านาจจ าแนกของขอทดสอบ และความเชอมนของแบบทดสอบ ซงมรายละเอยดดงน
1) ความยากงาย (Difficulty) พจารณาจากคาสดสวนของการตอบขอสอบนนถกจากจ านวนผท าแบบทดสอบทงหมด [Mehrens, 1991]
P = * 100 เกณฑการแปลความหมายคาความยากงาย (P) ของแบบทดสอบ [วภาวรรณ, 2548]
มดงน คา P = 0.00 – 0.19 หมายถง ขอสอบขอนนยากเกนไป คา P = 0.20 – 0.39 หมายถง ขอสอบขอนนคอนขางยาก คา P = 0.40 – 0.59 หมายถง ขอสอบขอนนยากปานกลาง คา P = 0.60 – 0.79 หมายถง ขอสอบขอนนยากคอนขางงาย คา P = 0.80 – 1.00 หมายถง ขอสอบขอนนงายเกนไป
2) ความเชอมน (Reliability) เปนการพจารณาความคงทของผลการวด แบงการ
พจารณาเปน 2 วธคอ 2.1) วธการของคเดอร-รชารดสน (Kuder Richardson) ใชส าหรบแบบทดสอบทม
การตรวจใหคะแนนเปน 1 และ 0 หมายถง ถาผเรยนท าถกได 1 คะแนน และท าผดได 0 คะแนน [Kuder & Richardson, 1937]
21
1t
t
pqnr
n s
เมอ rt คอ คาสมประสทธความเชอมน n คอ จ านวนขอของแบบทดสอบ p คอ สดสวนของผทตอบถกในขอใดๆ q คอ สดสวนของผทตอบผด (มคาเทากบ 1-p) 2
ts คอ คาความแปรปรวนของคะแนนจากทกขอค าถาม
จ ำนวนคนทตอบถกในขอนน
จ ำนวนคนททดสอบทงหมด
DPU
10
2.2) วธครอนบาค (Cronbach alpha) จะใชส าหรบแบบทดสอบทใหคะแนนแตละขอเปน 5, 4, 3, 2, 1 [Cronbach, 1951]
2
21
1
i
t
sn
n s
เมอ คอ คาสมประสทธความเชอมน n คอ จ านวนขอของแบบทดสอบ 2
is คอ คาความแปรปรวนของคะแนนจากแบบทดสอบรายขอ 2
ts คอ คาความแปรปรวนของคะแนนจากแบบทดสอบทงฉบบ เกณฑการแปลความหมายความเชอมนของแบบทดสอบ [วภาวรรณ, 2548] มดงน
คาสมประสทธความเชอมน = 0.01 – 0.19 หมายถง มความเชอมนต ามาก คาสมประสทธความเชอมน = 0.20 – 0.39 หมายถง มความเชอมนต า คาสมประสทธความเชอมน = 0.40 – 0.59 หมายถง มความเชอมนต าปานกลาง คาสมประสทธความเชอมน = 0.60 – 0.79 หมายถง มความเชอมนคอนขางสง คาสมประสทธความเชอมน = 0.80 – 1.00 หมายถง มความเชอมนสงมาก
3) อ านาจจ าแนก (Discrimination) คอ ความสามารถของแบบทดสอบทสามารถจ าแนกระหวางคนทเกงและคนทออนออกจากกนได [Mehrens, 1991]
/ 2
u eR Rr
N
เมอ r คอ คาอ านาจจ าแนกเปนรายขอ Ru คอ จ านวนคนทตอบถกในขอนนในกลมเกง/กลมสง Re คอ จ านวนคนทตอบถกในขอนนในกลมออน/กลมต า N คอ จ านวนคนททดสอบทงหมด
การแปลความหมายคาอ านาจจ าแนก (r) ของแบบทดสอบ [วภาวรรณ, 2548] มดงน คา r = 0.60 - 1.00 หมายถง อ านาจจ าแนกดมาก คา r = 0.40 - 0.59 หมายถง อ านาจจ าแนกด คา r = 0.20 - 0.39 หมายถง อ านาจจ าแนกพอใช คา r = 0.10 - 0.19 หมายถง อ านาจจ าแนกต า (ควรปรบปรงหรอตดทง) คา r = -1.00 - 0.09 หมายถง อ านาจจ าแนกต ามาก (ควรปรบปรงหรอ
ตดทง)
DPU
11
2.3 การทดสอบสมมตฐานโดยใช t-test ในการทดสอบสมมตฐานเกยวกบคาเฉลยของประชากร 2 กลม สามารถทดสอบไดโดย
ใช Z-test เมอกลมตวอยางแตละกลมมขนาดใหญ โดยในการวจยทางการศกษา กลมตวอยางขนาดใหญ คอ n ≥ 100 และเมอกลมตวอยางมขนาดเลกจะใช t-test ในการทดสอบ ซงถากลมตวอยาง 2 กลมเปนอสระจากกนจะใช t-test for independent samples ในการทดสอบ และใช t-test for dependent samples ในการทดสอบกรณทกลมตวอยางไมเปนอสระจากกน
กลมตวอยาง 2 กลม จะเปนอสระจากกน ถาไดมาโดยวธตอไปน วธท 1 มกลมทตองการศกษา (Subjects) 1 กลมใหญ แลวสมแยกเปน 2 กลมยอย
(Subgroup) เชน สมแยกเปนกลมทดลอง 1 กลม กลมควบคม 1 กลม วธท 2 สมกลมตวอยาง 2 กลม มาจากประชากร 2 กลม ทเปนอสระจากกน โดยสมกลม
ตวอยางขนาด n1 จากประชากรกลมท 1 และสมกลมตวอยางขนาด n2 จากประชากรกลมท 2 วธท 3 จ าแนกกลมตวอยางตามตวแปรอสระทศกษา เชน เพศ ชนป ฯลฯ การทดสอบความแตกตางระหวางคาเฉลยของกลมตวอยาง 2 กลมทเปนอสระจากกน
โดยใช t-test for independent samples แบงไดเปน 2 วธดงน 1. t-test for independent samples ในกรณท assume วา 2 2
1 2
ใชสตร 1 2
2
1 2
1 1( )p
x xt
sn n
df = 1 2 2n n
เมอ 1 2,x x แทนคาเฉลยของกลมตวอยางกลมท 1, 2 2
pS แทนความแปรปรวนรวม (Pooled variance)
2 2
2 1 1 2 2
1 2
( 1) ( 1)
2p
n S n SS
n n
n1, n2 แทนขนาดของกลมตวอยางกลมท 1, 2 df แทนชนแหงความเปนอสระ (degree of freedom)
ขอตกลงเบองตนของการใชสตรน 1) กลมตวอยางทงสองกลมตองเปนอสระจากกน และตองไดมาจากการสม
จากกลมประชากรทมการแจกแจงเปนโคงปกต 2) คณลกษณะทตองการศกษาภายในกลมตองเปนอสระจากกน
DPU
12
3) ความแปรปรวนของกลมประชากรทงสองกลมเทากน ( 2 2
1 2 ) แต ไมทราบคา
2. t-test for independent samples ในกรณท assume วา 2 2
1 2
ใชสตร 1 2
2 2
1 2
1 2
( )
x xt
s s
n n
22 2
1 2
1 2
2 22 2
1 2
1 2
1 21 1
s s
n ndf
s s
n n
n n
เมอ 1 2,x x แทนคาเฉลยของกลมตวอยางกลมท 1, 2 2 2
1 2,S S แทนความแปรปรวนรวม (Pooled variance) n1, n2 แทนขนาดของกลมตวอยางกลมท 1, 2 df แทนชนแหงความเปนอสระ (degree of freedom)
ขอตกลงเบองตนของการใชสตรน 1) กลมตวอยางทงสองกลมตองเปนอสระจากกน และตองไดมาจากการสม จาก
กลมประชากรทมการแจกแจงเปนโคงปกต 2) คณลกษณะทตองการศกษาภายในกลมตองเปนอสระจากกน 3) มเหตผลพอทจะเชอไดวาความแปรปรวนของกลมประชากรทงสองกลม ไม
เทากน ( 2 2
1 2 ) 4) ขนาดของกลมตวอยางไมเทากน 1 2( )n n
หมายเหต ในกรณทไมสามารถตดสนใจไดวา 2 2
1 2 หรอ 2 2
1 2 ควรตองมการทดสอบความแปรปรวนกอน ดวยการทดสอบคาเอฟ หรอ F-test โดยตง H0 และ H1 ดงน
H0: 2 2
1 2
H1: 2 2
1 2
DPU
13
สตรการทดสอบคาเอฟคอ 2
1
2
2
sF
s เมอ 2 2
1 2s s โดยม df1 = n1-1, df2 = n2-1 หรอ 2
2
2
1
sF
s เมอ 2 2
2 1s s โดยม df1 = n2-1, df2 = n1-1
หลงจากนนจงน าคา F ทค านวณไดจากสตรไปเปรยบเทยบกบ คาวกฤต F ทไดจากตาราง Critical values of F ในหนงสอสถต
(1) ถา F ทไดจากการค านวณ ≥ คาวกฤต F ทไดจากตาราง แสดงวาความแปรปรวนของประชากรสองกลมแตกตางกน 2 2
1 2 จะตองใชสตรการทดสอบคาท (t-test) ในขอ 2 (2) ถา F ทไดจากการค านวณ < คาวกฤต F ทไดจากตาราง แสดงวาความแปรปรวน
ของประชากรสองกลมเทากน 2 2
1 2 จะตองใชสตรการทดสอบคาท (t-test) ในขอ 1 2.4 การพฒนาระบบสารสนเทศ
กตต ภกดว ฒนะกล (2546) กลาววา การพฒนาระบบสารสนเทศ เปนการสรางระบบงานใหมหรอปรบเปลยนระบบงานเดมทมอยใหสามารถท างานเพอแกปญหาการด าเนนงานไดตามความตองการของผใชงาน โดยอาจน าคอมพวเตอรมาชวยในการน าขอมลเขาสระบบ ประมวลผล เรยบเรยง เปลยนแปลง และจดเกบผลลพธตามตองการ
ในการพฒนาระบบสารสนเทศจะมวงจรในการพฒนาระบบ (System Development Life Cycle: SDLC) ซงเปนวธทท าใหกระบวนการตางๆ ทตองกระท าในแตละขนตอนของการท างานถกก าหนดขนอยางชดเจนและรดกม โดยมวธตรวจสอบยนยนความถกตองของขอก าหนดทก าหนดขนกอนทจะด าเนนการในขนตอนตอไป
วงจรการพฒนาระบบงานแบงออกเปน 7 ขนตอนคอ 1. ขนตอนการก าหนดปญหาของระบบ (Problem Definition) 2. ขนตอนการวเคราะหระบบ (Analysis) 3. ขนตอนการออกแบบระบบ (Design) 4. ขนตอนการพฒนาระบบ (Development) 5. ขนตอนการทดสอบระบบ (Testing) 6. ขนตอนการใชงานจรง (Implementation) 7. ขนตอนการบ ารงรกษา (Maintenance)
DPU
14
ภาพท 2.1 วงจรการพฒนาระบบงาน (System Development Life Cycle: SDLC)
1. ขนตอนการก าหนดปญหาของระบบ (Problem Definition) เปนขนตอนการคนหา
ปญหาทแทจรงทเกดขนกบระบบปจจบน พรอมทงศกษาและวเคราะหความเปนไปไดของการน าคอมพวเตอรมาใชงาน รวมทงศกษาทางเลอกทเปนไปได และเสนอทางเลอกทเหมาะสมทสด โดยพจารณาถงการลงทน คาใชจาย ผลประโยชนทไดรบ ขอบเขตของงาน ขนตอนและระยะเวลาในการพฒนา
2. ขนตอนการวเคราะหระบบ (Analysis) เปนขนตอนการเขาไปศกษารายละเอยดขนตอนการท างานของระบบปจจบน ก าหนดสงทจะตองท าเพอแกปญหา โดยการวเคราะหจะท ารวมกบผใชเพอใหได แบบจ าลองลอจคล (Logical Model) ทก าหนดกระบวนการทส าคญของขอมลในการสรางทางเลอกในการแกปญหา
3. ข นตอนการออกแบบระบบ (Design) ข นตอนนเปนขนตอนการเปลยนจากแบบจ าลองลอจคล (Logical Model) เปนแบบฟสคล (Physical Model) การออกแบบจะแบง
ก าหนดปญหาของระบบ
วเคราะหระบบ
ออกแบบระบบ
บ ารงรกษาระบบ
พฒนาระบบ
ทดสอบระบบ
ใชงานจรง
DPU
15
ออกเปน 2 ขนตอน ไดแก ขนตอนการพจารณาขอมลเขาและขอมลออก และขนตอนการพจารณา ขนตอนการท างานของสวนประกอบแตละสวน
4. ขนตอนการพฒนาระบบ (Development) เปนขนตอนการพฒนาโปรแกรม และสรางฐานขอมลตามทไดออกแบบไว รวมทงมการตรวจสอบขอผดพลาดของโปรแกรม (Debug) และจดท าเอกสารประกอบการใชงาน (Manual)
5. ขนตอนการทดสอบระบบ (Testing) เปนขนตอนหลงจากทไดพฒนาระบบเสรจสมบรณแลว จะตองท าการทดสอบความถกตองของการท างานกอนการน าไปใชจรง โดยจะตองท าการทดสอบแตละขนตอนในแตละสวนยอย (Module Testing) และท าการทดสอบระบบโดยรวม (System Testing) เพอใหแนใจวาระบบนนถกตองตามความตองการของผใช
6. ขนตอนการใชงานจรง (Implementation) เกดขนเมอระบบใหมทไดรบการพฒนาและทดสอบสมบรณ ระบบดงกลาวกพรอมทจะน ามาใชงานจรง ในขนตอนนอปกรณทกอยางจะตองไดรบการตดตงและทดสอบเรยบรอย นอกจากนจะตองมการฝกอบรมผใชงานเพอใหมความรความสามารถในการใชงานในระบบทพฒนาขนใหม
7. ขนตอนการบ ารงรกษา (Maintenance) เพอใหระบบงานนนเชอถอได ท างานไดตรงตามความตองการของผใช และมประสทธภาพตอไป ตองมระบบตดตามการใชงาน การบรหารปญหา (Problem Management) และปรบแตงระบบ (System Tuning) ตลอดจนคาดการณการใชทเพมขน และวางแผนเพมความสามารถใหเหมาะสม 2.5 การจดการฐานขอมล
โอภาส เอยมสรวงศ (2546) กลาววา ระบบฐานขอมล (Database Management System: DBMS) เปนแหลงหรอศนยรวมของขอมลทมความสมพนธกน มกระบวนการจดหมวดหมของขอมลทมแบบแผนซงกอใหเกดฐานขอมลทเปนแหลงรวมของขอมลจากสวนตางๆและถกจดเกบไวอยางเปนระบบ นอกจากนยงรกษาความปลอดภยของขอมล การส ารองขอมล และการเรยกคนขอมลในกรณทขอมลเกดความเสยหาย การจดเกบขอมลรวมเปนฐานขอมลจะกอใหเกดประโยชนดงน
1) สามารถลดความซ าซอนของขอมลได การเกบขอมลชนดเดยวกนไวหลาย ๆ ท ท าใหเกดความซ าซอน (Redundancy) ดงนนการน าขอมลมารวมเกบไวในฐานขอมล จะชวยลดปญหาการเกดความซ าซอนของขอมลได
2) หลกเลยงความขดแยงของขอมลได โดยหากมการเกบขอมลชนดเดยวกนไวหลายๆทและมการปรบปรงขอมลเดยวกนน แตปรบปรงไมครบทกทจะท าใหเกดปญหาขอมลขดแยงกน
DPU
16
(Inconsistency) แตเมอเกบขอมลในฐานขอมล ขอมลตางๆจะถกเกบไวรวมกนทเดยวจงไมท าใหเกดความขดแยงกนของขอมล
3) สามารถรกษาความถกตอง ความนาเชอถอของขอมลได โดยในระบบจดการฐานขอมล สามารถใสกฎเกณฑเพอควบคมความผดพลาดของการบนทกขอมลทไมถกตอง ไมสอดคลองกบขอบเขตทก าหนดได
4) สามารถก าหนดความเปนมาตรฐานเดยวกนของขอมลได เชน การก าหนดรปแบบของวนท ในลกษณะ วน/เดอน/ป หรอ ป/เดอน/วน
5) สามารถก าหนดระบบความปลอดภยของขอมลได โดยเปนการปองกนไมใหผใชทไมมสทธมาใช หรอมาเหนขอมลบางอยางในระบบ
6) เกดความเปนอสระของขอมล ในระบบฐานขอมลจะมตวจดการฐานขอมลทท าหนาทเปนตวเชอมโยงกบฐานขอมล โปรแกรมตางๆ อาจไมจ าเปนตองมโครงสรางขอมลทกครง ดงนนการแกไขขอมลบางครง จงอาจกระท าเฉพาะกบโปรแกรมทเรยกใชขอมลทเปลยนแปลงเทานน สวนโปรแกรมทไมไดเรยกใชขอมลดงกลาว กจะเปนอสระจากการเปลยนแปลง
กตต ภกดวฒนะกล และกตตพงษ กลมกลอม (2548) กลาววา ER-Diagram หรอ Entity Relationship Diagram คอ แผนผงแสดงความสมพนธระหวาง Entity หรอกลมขอมล ซงจะแสดงชนดของความสมพนธวาเปนชนดหนงตอหนง (One to One) หนงตอหลายสง (One to Many) หรอหลายสงตอหลายสง (Many to Many) ซงมองคประกอบพนฐาน คอ เอนทต (Entity) เปนวตถ หรอสงของทเราสนใจในระบบงานนนๆ แอททรบว (Attribute) เปนคณสมบตของวตถทเราสนใจ และความสมพนธ (Relationship) คอ ความสมพนธระหวางเอนทต ในการออกแบบ ER-Diagram มขนตอนดงน
ขนตอนท 1 การก าหนดเอนทตหลก การก าหนดเอนทต คอใหพจารณาขอมลทงหมดทม และจดกลมของขอมล โดยดจากคา และความหมายถาสามารถรวมกลมกนไดกใหรวมเขาไวในเอนทตเดยวกน แลวจงน าไปก าหนดชอและความหมายลงในพจนานกรมขอมล และเขยนลงโมเดลขอมลดวยการตงชอ
ขนตอนท 2 การก าหนดความสมพนธ ระหวางเอนทต ก าหนดชอ ประเภทของความสมพนธ ทศทาง
ขนตอนท 3 การก าหนดคยหลกและคยรอง การเพมขอมลทเรยกวา แอตตรบวตลงในทกๆ เอนทต หลงจากก าหนดแลวใหต ง ชอระบในโมเดลขอมลเชงตรรกะพรอมท งใสในพจนานกรมขอมลดวย การตงชอควรก าหนดสนๆ งายๆ อาจใชชอยอกได และควรหลกเลยงการตงชอแอตตรบวของสองสงทไมเหมอนกนดวยชอเดยวกน
DPU
17
2.6 งานวจยทเกยวของ ในปจจบนไดมการใหบรการระบบสรางแบบทดสอบออนไลนจ านวนมากโดยการท างานของระบบจะใหผใชสรางขอสอบเกบไวเปนธนาคารขอสอบและระบบจะท าการสมขอสอบมาเพอใชในการทดสอบแตละครง ตวอยางของโปรแกรมทสนบสนนในการพฒนาระบบเหลาน เชน โปรแกรม Hot Potatoes (http://hotpot.uvic.ca/), Quia (http://www.quia.com/web), Zoho Challenge (https://challenge.zoho.com/login.do) เปนตน นอกจากระบบทท าการสมขอสอบแบบดงกลาวแลวยงมระบบทดสอบออนไลนทปรบขอสอบใหเหมาะตามความสามารถของผสอบซงเรยกวา Computerized Adaptive Test (CAT) โดยแบบทดสอบแตละชดจะมการออกแบบใหเหมาะสมความสามารถของผสอบแตละคน (ศรชย กาญจนวาส, 2550) โดยจะตองมการเกบคาสารสนเทศของขอสอบ (Item Information Function) แตละขอซงเปนคาทแสดงถงคณภาพและความยากงายของขอสอบเพอน ามาใชในการเลอกขอสอบแตละขอมาสรางเปนแบบทดสอบใหเหมาะสมกบความสามารถของผทดสอบ (รงสรรค มณเลก, 2540) ตวอยางของระบบทดสอบแบบนไดแก ขอสอบ Graduate Record Examination - GRE (http://www.mba.com/the-gmat.aspx), Graduate Management Admission Test – GMAT (http://www.ets.org/gre) เปนตน ในดานงานวจยไดมการศกษาและพฒนาระบบคลงขอสอบและวเคราะหขอสอบดงน สโกศล วโนทยาพทกษ และสาธต วงศประทป (2555) ไดพฒนาระบบการสอบออนไลนทสามารถน าผลการสอบกลบมาวเคราะหขอสอบไดแบบอตโนมต โดยไดท าการวเคราะหดานคาความเชอมน คาอ านาจจ าแนก และคาความยากงาย ซงพฒนาระบบโดยใชโปรแกรมภาษาพเอชพ (PHP) ท างานรวมกบฐานขอมลมายเอสควแอล (MySQL) ซงสามารถปรบปรงคณภาพของแบบทดสอบออนไลนใหดขนได นอกจากนยงมระบบการจดกลมงาน ทชวยใหการจดการขอสอบมประสทธภาพเพราะสามารถแบงปนขอมลตางๆใหกบสมาชกของกลมงานได โดยขอมลทสามารถแบงปนกนได ไดแก ขอมลรายวชา ขอมลนกศกษา และขอมลขอสอบ ซงท าใหประหยดเวลาและสะดวกตอการพฒนาขอสอบรวมกนในกลม โสภา เทยงดาห และคณะ (2555) ไดน าเสนอระบบพฒนาคณภาพขอสอบแบบครบกระบวนการและมความเทยงตรงสง โดยกระบวนการท างานเรมจาก 1) การออกขอสอบ 2) การประเมนความเทยงตรงของขอสอบโดยผเชยวชาญ โดยขอสอบทผานการประเมนจะตองไดรบการประเมนใหผานจากผเชยวชาญอยางนอย 3 คนจากทงหมด 5 คน หากขอสอบไมผานการประเมนจะถกสงกลบไปใหผออกขอสอบปรบปรง 3) การสรางขอสอบ ท าโดยผออกขอสอบจดชดขอสอบจากคลงขอสอบ 4) การทดสอบออนไลน 5) การวเคราะหหาคณภาพในดานคาความยากงาย คา
DPU
18
อ านาจจ าแนก และคาความเชอมน และ 6) ขอสอบทไมผานการวเคราะหคณภาพจะถกสงเขาสกระบวนการปรบปรงขอสอบตอไป ซงระบบนชวยใหไดขอสอบทมคณภาพ มความถกตอง และรองรบการเรยนการสอบแบบออนไลน พชร ย าเทยง (2555) ไดศกษาและพฒนาโปรแกรมคลงขอสอบและระบบวเคราะหขอสอบอตโนมตเพอเพมประสทธภาพการประเมนผลการศกษา ซงพฒนาดวยโปรแกรมภาษา พเอชพ (PHP) และจดการระบบฐานขอมลดวยโปรแกรมมายเอสควแอล (MySQL) โดยท าการวเคราะหขอสอบในดานคาความยากงาย คาอ านาจจ าแนก และคาความเชอมน ผลการวจยพบวาระบบมประสทธภาพในการจดเกบขอมลทเกยวของ และท าใหไดขอสอบทมคณภาพในการประเมนผลการศกษา ทรงวฒ แซอง (2552) น าเสนอระบบการทดสอบออนไลนโดยวธเลอกจากความยากงาย โดยระบบจะท าการหาคาสถตคาความยากงายของขอสอบจากขอมลการท าแบบทดสอบของผ เขาสอบเกบไว หลงจากนนจะน าอลกอรทมตนไมตดสนใจมาชวยในการคดเลอกขอสอบ โดยเรมตนระบบจะท าการการเลอกขอสอบทมคาความยากเทากนเปนจ านวน 3 ขอ หากผเขาสอบท าขอสอบถกตอง 2 ใน 3 ขอ ระบบจะคดเลอกขอสอบทมความยากและมคะแนนสงมากขนมาใหทดสอบ หากผเขาสอบท าขอสอบผดทง 2 ขอจาก 3 ขอ ระบบจะคดเลอกขอสอบทมความความงายและคะแนนนอยมาใหทดสอบ ซงระบบสามารถชวยในการแยกแยะคนเกงและคนไมเกงไดอยางชดเจน กตตมา เจรญหรญ (2550) ไดน าเสนอและพฒนาระบบการวเคราะหและการสรางคลงขอสอบผานเครอขายอนเตอรเนต ส าหรบมหาวทยาลยเอกชน โดยศกษาความตองการจากคณาจารยของมหาวทยาลยเอกชน 3 แหง คอ มหาวทยาลยศรปทม มหาวทยาลยหวเฉยวเฉลมพระเกยรต และมหาวทยาลยชนวตร จ านวนทงสน 392 คน และไดน าระบบไปทดลองใชทมหาวทยาลยศรปทม โดยผใชสามารถจดท าขอสอบปรนยชนดหลายตวเลอก และขอสอบอตนย และระบบจะเชอมโยงกบโปรแกรมส าเรจรปทมอยเพอวเคราะหขอสอบปรนย สวนขอสอบอตนยใชวธการหาคาความยากงาย และคาอ านาจจ าแนก ผลการประเมนระบบพบวาระบบสามารถใชงานไดสะดวก และมความปลอดภยสง งานวจยนไดท าการศกษาและพฒนาระบบวเคราะหและประเมนคณภาพของแบบทดสอบออนไลนทใชในการประเมนทกษะดานเทคโนโลยสารสนเทศ ของคณะเทคโนโลยสารสนเทศ ซงเปนขอสอบแบบปรนยชนดหลายตวเลอก และขอสอบแบบปฏบต ระบบถกพฒนาโดยโปรแกรมพเอชพ (PHP) ท างานรวมกบฐานขอมลเอสควแอลเซรฟเวอร (SQL Server) ซงท าการวเคราะหขอสอบในดานคาความยากงาย คาอ านาจจ าแนก และคาความเชอมน และเกบเปนคา
DPU
19
สารสนเทศของขอสอบแตละขอ และน ามาใชในการสมเลอกเพอใหการสมมกระจายออกไปตามเนอหาและระดบความยากงายของขอสอบ และเพอสรางใหชดขอสอบแตละชดมคาความยากงายเทาๆกน เพอความยตธรรมแกผเขาสอบ นอกจากนคาสารสนเทศเหลานอาจน ามาใชในการพฒนาระบบทดสอบออนไลนแบบปรบเหมาะตามความสามารถของผสอบไดในอนาคตได
DPU
บทท 3 ระเบยบวธวจย
ขนตอนในการด าเนนการวจยของระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน มดงน 3.1 ระเบยบวธวจย 3.2 การก าหนดประชากรและกลมตวอยาง 3.3 การพฒนาเครองมอทใชในการวจย 3.4 การวเคราะหขอมล
3.1 ระเบยบวธวจย
งานวจยนด าเนนการวจยโดยการพฒนาโปรแกรมเพอเกบขอมลการท าแบบทดสอบของนกศกษา และน าขอมลทไดมาวเคราะหเพอประเมนคณภาพของแบบทดสอบออนไลน และพฒนาระบบเพอน าเสนอผลประเมนในรปแบบตารางและกราฟทอาจารยสามารถสบคนขอมลไดตามตองการ และอาจารยสามารถก าหนดเกณฑในการสมเลอกขอสอบใหมไดตามระดบความยากงายเพอความยตธรรมของแบบทดสอบแตละชด โดยสามารถแสดงรายละเอยดไดดงภาพท 3.1
� � �
� �
�
ภาพท 3.1 สถาปตยกรรมของระบบ
DPU
21
3.1.1 การพฒนาโปรแกรม
โปรแกรมระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน สามารถแบงสวนการพฒนาออกได 3 สวน คอ
1) การพฒนาโปรแกรมในสวนการเกบขอมลการทดสอบของนกศกษา โดยในการทดสอบของนกศกษาแตละคน โปรแกรมจะท าการสมขอสอบจากคลงขอสอบตามหวขอและจ านวนทก าหนด เมอนกศกษาท าขอสอบโปรแกรมจะบนทกค าตอบทนกศกษาเลอกตอบไวในฐานขอมล เพอน าไปใชในการวเคราะหขอสอบในล าดบถดไป
2) การพฒนาโปรแกรมในสวนการวเคราะหและประเมนคณภาพของแบบทดสอบในประเดนตางๆ ดงรายละเอยดในหวขอ 3.1.2
3) การพฒนาโปรแกรมในสวนการน าเสนอรายงานผลการว เคราะห คณภาพแบบทดสอบ และการสมเลอกขอสอบตามคณภาพของแบบทดสอบและอตราสวนทก าหนด
3.1.2 การวเคราะหคณภาพของแบบทดสอบ
ขอมลทเกบรวบรวมไดมาวเคราะหคณภาพของขอสอบแตละขอ ดงรายละเอยดตอไปน 1) ความเชอมน (Reliability) เปนการพจารณาความคงทของผลการวด ผวจยเลอกใช
วธการของคเดอร-รชารดสน (Kuder Richardson) เนองจากแบบทดสอบมการตรวจใหคะแนนเปน 1 และ 0 คอ ถาผเรยนท าถกได 1 คะแนน และท าผดได 0 คะแนน [Kuder & Richardson, 1937]
21
1t
t
pqnr
n s
เมอ rt คอ คาสมประสทธความเชอมน n คอ จ านวนขอของแบบทดสอบ p คอ สดสวนของผทตอบถกในขอใดๆ q คอ สดสวนของผทตอบผด (มคาเทากบ 1-p) 2
ts คอ คาความแปรปรวนของคะแนนจากทกขอค าถาม
2) ความยากงาย (Difficulty) พจารณาจากคาสดสวนของการตอบขอสอบนนถกจากจ านวนผท าแบบทดสอบทงหมด [Mehrens, 1991]
P = * 100 จ ำนวนคนทตอบถกในขอนน
จ ำนวนคนททดสอบทงหมด
DPU
22
3) อ านาจจ าแนก (Discrimination) คอ ความสามารถของแบบทดสอบทสามารถจ าแนก
ระหวางคนทเกงและคนทออนออกจากกนได [Mehrens, 1991]
/ 2
u eR Rr
N
เมอ r คอ คาอ านาจจ าแนกเปนรายขอ Ru คอ จ านวนคนทตอบถกในขอนนในกลมเกง/กลมสง Re คอ จ านวนคนทตอบถกในขอนนในกลมออน/กลมต า N คอ จ านวนคนททดสอบทงหมด
3.2 การก าหนดประชากรและกลมตวอยาง
งานวจยนเปนการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน ซงเปนแบบทดสอบดานเทคโนโลยสารสนเทศโดยแบงประเภทขอสอบออกไดดงตารางท 3.1
ตารางท 3.1 ขอมลแบบประเมนทกษะดานเทคโนโลยสารสนเทศ
ประเภทค าถาม จ านวน (ขอ) รอยละ 1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ 1280 77.71 2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ
2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
222 74 71
13.48 4.50 4.31
รวม 1647 100
โดยขอมลทน ามาใชเปนพนฐานในการวเคราะหเปนขอมลการทดสอบของนกศกษาทกคน ทเขารบการทดสอบทกษะดานเทคโนโลยสารสนเทศ ในป พ.ศ. 2554 จ าแนกไดตาม ตารางท 3.2 DP
U
23
ตารางท 3.2 ขอมลจ านวนครงในการทดสอบแยกตามภาคเรยน
ภาคเรยน จ านวน (ครง) รอยละ ภาคเรยนท 1/2554 1685 37.06 ภาคเรยนท 2/2554 2862 62.94 รวม 4547 100
3.3 การพฒนาเครองมอทใชในการวจย
งานวจยนไดพฒนาโปรแกรมคอมพวเตอรขนมาเพอเปนเครองมอในการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน โดยมรายละเอยดทเกยวของกบการพฒนาระบบ ดงนคอ เครองมอและโปรแกรมทเกยวของมรายละเอยดดงอธบายในหวขอ 3.3.1 มการออกแบบระบบโดยใช Use Case Diagram เพอแสดงการท างานของผใชภายในระบบ และความสมพนธระหวางระบบยอยตางๆ และรายละเอยดตางๆแสดงโดยใช Use Case Description นอกจากนวเคราะหความสมพนธของขอมลโดยใช ER Diagram และ Data Dictionary รายละเอยดตางๆแสดงในหวขอ 3.3.2 – 3.3.5
3.3.1 เครองมอและโปรแกรมทใชในการพฒนาระบบ 1) ซอฟตแวร (Software)
1.1) โปรแกรมภาษา PHP 1.2) ฐานขอมล Microsoft SQL Server 2008 1.3) IIS Web Server 1.4) Adobe Photoshop
2) ฮารดแวร (Hardware) 2.1) ซพย CPU มความเรว 2.00 GHz. ขนไป 2.2) ฮารดดสก (Hard Disk) ความจขนาด 60 GB ขนไป 2.3) หนวยความจ า (RAM) ขนาดความจ า 512 MB ขนไป 2.4) การดแสดงผล ขนาด 512 MB 2.5) หนาจอ (Monitor) ขนาด 17 นว
DPU
24
3.3.2 แผนภาพยสเคส (Use Case Diagram) Use Case Diagram คอแผนภาพทแสดงการท างานของผใชภายในระบบ และ
ความสมพนธระหวางระบบยอยตางๆ โดย Use Case Diagram ของระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน สามารถแสดงไดดงน
�
�
�
�
�
<<uses>> <<uses>>
<<uses>><<uses>>
ภาพท 3.2 แผนภาพยสเคสของระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน
3.3.3 ค าอธบายยสเคส (Use Case Description)
ค าอธบายขนตอนการท างานของระบบระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน สามารถอธบายไดดงตารางท 3.3 - 3.7
DPU
25
ตารางท 3.3 ตารางแสดงรายละเอยดเหตการณเขาสระบบ
Use Case Name เขาสระบบ Scenario เขาสระบบ Triggering Event เรมตนเขาสระบบ Brief Description ผใชงานใสขอมลผใชงานและรหสผานเพอตรวจสอบสทธในการใชงาน Actor ผดแลระบบ, ผบรหาร, อาจารย, นกศกษา Pre conditions ผใชเขาสหนาแรกของระบบ Post conditions ผใชไดสทธในการเขาใชงานระบบ Flow of Events Actor System
1. ผใชเขาสหนาแรกของระบบ กรอกชอผใชและรหสผาน กดสงขอมลไปสระบบเพอตรวจสอบ
2.ระบบท าการตรวจสอบชอผใชและรหสผาน และแสดงเมนการใชงานตามสทธของผใช 3. เขาสระบบหลก
Exception -
DPU
26
ตารางท 3.4 ตารางแสดงรายละเอยดเหตการณการจดการขอมลหลกตางๆ
Use Case Name จดการขอมลหลกตางๆ Scenario จดการขอมลหลกตางๆ Triggering Event ผดแลระบบเขาสหนาจอการจดการขอมลหลก Brief Description จดการขอมลหลกตางๆ เชน ขอมลผใช ขอมลหวขอแบบทดสอบ
ขอมลจ านวนขอของแตละหวขอทใชในแบบทดสอบ เปนตน โดยผดแลระบบสามารถเพม แกไข และลบขอมลหลกตางๆได
Actors ผดแลระบบ Preconditions ผดแลระบบได login เขาระบบแลว Post conditions - Flow of Activities Actor System
1.ผดแลระบบเพมขอมลใหม หรอเรยกดขอมลเกาแลวแกไขหรอลบขอมลดงกลาว
2.ระบบบนทกขอมลทผใชเพม แกไข หรอลบลงในฐานขอมล
Exception - DP
U
27
ตารางท 3.5 ตารางแสดงรายละเอยดเหตการณการจดการแบบทดสอบ Use Case Name จดการแบบทดสอบ Scenario จดการแบบทดสอบ Triggering Event อาจารยเขาสหนาจอการจดการแบบทดสอบ Brief Description จดการแบบทดสอบ โดยอาจารยสามารถเพม แกไข และลบขอมล
ค าถามและค าตอบของแบบทดสอบได Actors อาจารย Preconditions อาจารยได login เขาระบบแลว Post conditions - Flow of Activities Actor System
1.อาจารยเพมแบบทดสอบใหม หรอเรยกดแบบทดสอบเกาแลวแกไขหรอลบแบบทดสอบดงกลาว
2.ระบบบนทกแบบทดสอบทผใชเพม แกไข หรอลบลงฐานขอมล
Exception -
DPU
28
ตารางท 3.6 ตารางแสดงรายละเอยดเหตการณการท าแบบทดสอบ Use Case Name ท าแบบทดสอบ Scenario ท าแบบทดสอบ Triggering Event นกศกษาเขาสหนาจอการท าแบบทดสอบ Brief Description นกศกษาท าแบบทดสอบทถกสมขนมา ตามหวขอ จ านวนขอและความ
ยากงายทก าหนด และระบบตรวจสอบความถกตองของค าตอบและค านวณคะแนน
Actors นกศกษา Preconditions นกศกษาได login เขาระบบแลว Post conditions - Flow of Activities Actor System
1.นกศกษาท าแบบทดสอบไปทละขอตามล าดบ
1.ระบบแสดงค าถามทถกสมขนมาทละขอ 3. ระบบตรวจค าตอบ และบนทกขอมลการท าแบบทดสอบลงฐานขอมล
Exception - DP
U
29
ตารางท 3.7 ตารางแสดงรายละเอยดเหตการณการดรายงานผลการวเคราะหคณภาพแบบทดสอบ Use Case Name ดรายงานผลการวเคราะหคณภาพแบบทดสอบ Scenario ดรายงานผลการวเคราะหคณภาพแบบทดสอบ Triggering Event ผบรหารเขาสหนาจอการดรายงานผลการวเคราะหคณภาพ
แบบทดสอบ Brief Description ผบรหารดรายงานผลการวเคราะหคณภาพแบบทดสอบในประเดน
ตางๆ ไดแก คาความเชอมน คาความยากงาย และคาอ านาจจ าแนก Actors ผบรหาร Preconditions ผบรหารได login เขาระบบแลว Post conditions - Flow of Activities Actor System
1. ผบรหารเลอกดรายงานผลการวเคราะหคณภาพแบบทดสอบในประเดนตางๆ และสามารถสบคนตามเงอนไขทตองการ เชน เลอกดเฉพาะหวขอแบบทดสอบทตองการ เปนตน
2.ระบบแสดงรายงานผลการวเคราะหคณภาพแบบทดสอบตามทผใชตองการ
Exception - DP
U
30
3.3.4 แผนภาพออาร (ER Diagram) ER Diagram คอแผนภาพทใชอธบายโครงสรางและการจดเกบขอมลใน
ฐานขอมล โดย ER Diagram ของระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน สามารถแสดงไดดงน
has
under
test
has
has
has
has
hashas
approve has
set
Approve
PK AppID
UserID QID Status Comment ModifyDT
Question
PK QID
Question FileName TypeID Score TitleID LevelID UserID Status EFFDT TestTotal TestCorrect TestDiff
Exam
PK EID
UserID LevelID ExamDTTM TotalScore Status ScoreT1 ScoreT2 PercentT1 PercentT2 TotalPercent EndDTTM
History
PK HID
QID EID CID QOrder Correct ModifyDTTM
Type
PK TypeID
TypeName
Faculty
PK FacID
FacName
ExitTestUser
PK UserID
UserName Password Type FacID DepID RoleID GroupID
Choice
PK CIDPK QID
Choice Score Fix
Title
PK TitleID
Title LevelID NumofQ
Level
PK LevelID
LevelName MaxTime PassScore
has
Group
PK GroupID
GroupName
has
Role
PK RoleID
RoleName
has
Department
PK DepID
DepName FacID
under
under
has
has
status
PK StatusID
Status
has
ภาพท 3.3 แผนภาพออารของระบบการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน
3.3.5 พจนานกรมขอมล (Data Dictionary)
พจนานกรมขอมล (Data Dictionary) ส าหรบจดเกบขอมลของระบบสามารถแสดงดงตารางท 3.8 – 3.21 โดยมรายละเอยดดงตอไปน DP
U
31
ตารางท 3.8 ตาราง ExitTestUser (ขอมลผใช)
No. ColumnName DataType Nullable Description 1 UserID (PK) varchar(20) not null รหสนกศกษา หรอ รหสพนกงาน 2 Password varchar(20) null รหสผาน 3 UserName varchar(100) null ชอ-สกล 4 FacID (FK) varchar(20) null รหสคณะทสงกด 5 DepID (FK) varchar(20) null รหสสาขาวชา 6 RoleID (FK) varchar(10) null รหสบทบาท 7 GroupID (FK) varchar(10) null รหสกลม (ใชในการออกขอสอบของอาจารย)
ตารางท 3.9 ตาราง Exam (การสอบ) No. ColumnName DataType Nullable Description 1 EID (PK) bigint not null รหสการสอบ 2 UserID (FK) varchar(100) null รหสนกศกษา 3 LevelID (FK) varchar(100) null รหส level ของชดขอสอบ 4 ExamDTTM datetime null วน-เวลา ทเรมท าขอสอบ 5 TotalScore int null คะแนนทได 6 Status varchar(5) null สถานะของการสอบ(ผาน/ไมผาน) 7 ScoreT1 int null คะแนนการสอบแบบปฏบต 8 ScoreT2 int null คะแนนการสอบแบบเลอกตอบ 9 PercentT1 float null เปอรเซนตการสอบแบบปฏบต
10 PercentT2 float null เปอรเซนตการสอบแบบเลอกตอบ 11 TotalPercent float null เปอรเซนตการสอบรวม 12 EndDTTM datetime null วน-เวลา ทท าขอสอบเสรจ
DPU
32
ตารางท 3.10 ตาราง Question (ค าถาม) No. ColumnName DataType Nullable Description 1 QID (PK) varchar(50) not null รหสค าถาม 2 Question nvarchar(1000) null รายละเอยดค าถาม 3 FileName varchar(50) null ชอไฟลประกอบค าถาม 4 TypeID (FK) varchar(20) null ชนดของขอสอบ 5 Score smallint null คะแนน 6 TitleID (FK) varchar(20) null รหสหวขอ 7 LevelID (FK) varchar(20) null รหส level ของขอสอบ 8 UserID (FK) varchar(20) null รหสอาจารยผออกขอสอบ 9 Status (FK) varchar(5) null รหสสถานะของขอสอบ
10 CreateDT date null วนทสรางขอสอบ 11 EFFDT date null วนทขอสอบเรมใชงาน 12 TestTotal int null จ านวนครงทถกใชทดสอบ 13 TestCorrect int null จ านวนครงทนกศกษาตอบค าถามขอนถก 14 TestDiff float null คาความยากงายของค าถามขอน
ตารางท 3.11 ตาราง Choice (ตวเลอก) No. ColumnName DataType Nullable Description 1 QID (PK) varchar(50) not null รหสค าถาม 2 CID (PK) varchar(50) not null รหสตวเลอกค าตอบ 3 Choice nvarchar(500) null รายละเอยดตวเลอก 4 Score int null คะแนน 5 Fix char(1) null ตองการใหค าตอบนแสดงเปนล าดบสดทาย
หรอไม (T/F)
DPU
33
ตารางท 3.12 ตาราง History (ประวตการสอบ) No. ColumnName DataType Nullable Description 1 HID (PK) bigint not null รหสประวตการตอบขอสอบ 2 QID (FK) varchar(50) null รหสค าถาม 3 EID (FK) varchar(100) null รหสการสอบ 4 CID (FK) varchar(5) null รหสตวเลอกทนกศกษาตอบ 5 QOrder varchar(5) null ล าดบทของขอสอบในชดค าถาม 6 Correct varchar(5) null เปนค าตอบทถกหรอไม 7 ModifyDTTM datetime null วน-เวลาทตอบขอสอบ
ตารางท 3.13 ตาราง Approve (การอนมต) No. ColumnName DataType Nullable Description 1 AppID (PK) varchar(10) not null รหสการอนมต 2 UserID (FK) varchar(20) null รหสพนกงานของผอนมต 3 QID (FK) varchar(50) null เลขทขอสอบ 4 Status (FK) varchar(5) null สถานะของขอสอบ 5 Comment varchar(500) null ความคดเหนเพมเตม 6 ModifyDTTM date null วน-เวลาอนมต
ตารางท 3.14 ตาราง Title (หวขอขอสอบ) No. ColumnName DataType Nullable Description 1 TitleID (PK) varchar(2) not null รหสหวขอ 2 Title varchar(50) null ชอหวขอ 3 LevelID (FK) varchar(50) null รหส level ของหวขอ 4 NumofQ int null จ านวนค าถามทจะใหระบบสมมาท าเปนชด
ขอสอบ 5 TypeID (FK) varchar(10) null ชนดของขอสอบ 6 Status (FK) nvarchar(1) null สถานะของหวขอ
DPU
34
ตารางท 3.15 ตาราง Level (ระดบของค าถาม) No. ColumnName DataType Nullable Description 1 LevelID (PK) nchar(1) not null รหสระดบของการสอบและค าถาม 2 LevelName nchar(10) null ชอระดบ 3 MaxTime int null เวลาในการสอบ 4 PassScore int null คะแนนผาน
ตารางท 3.16 ตาราง Faculty (คณะ) No. ColumnName DataType Nullable Description 1 FacID (PK) varchar(20) not null รหสคณะ 2 FacName varchar(100) null ชอคณะ
ตารางท 3.17 ตาราง Department (สาขาวชา) No. ColumnName DataType Nullable Description 1 DepID (PK) varchar(20) not null รหสสาขาวชา 2 DepName varchar(100) null ชอสาขาวชา 3 FacID (FK) varchar(50) null รหสคณะ
ตารางท 3.18 ตาราง Role (บทบาทของผใช) No. ColumnName DataType Nullable Description 1 RoleID (PK) int not null รหสบทบาทผใช 2 RoleName nvarchar(100) null ชอบทบาทผใช
ตารางท 3.19 ตาราง Group (กลมของอาจารย) No. ColumnName DataType Nullable Description 1 GroupID (PK) int not null รหสกลมของอาจารย (ใชในการออกขอสอบ) 2 GroupName varchar(100) null ชอกลม
DPU
35
ตารางท 3.20 ตาราง Status (สถานะของขอสอบ) No. ColumnName DataType Nullable Description 1 StatusID (PK) int not null รหสสถานะของขอสอบ 2 Status varchar(50) null ชอสถานะของขอสอบ
ตารางท 3.21 ตาราง Type (ประเภทขอสอบ) No. ColumnName DataType Nullable Description 1 TypeID (PK) varchar(10) not null รหสประเภทขอสอบ 2 TypeName varchar(50) null ชอประเภท
3.4 การวเคราะหขอมล งานวจยนแบงการวเคราะหขอมลเปน 2 ขนตอน คอการวเคราะหและประเมนคณภาพ
ของแบบทดสอบใน 3 ดาน ไดแก คาความเชอมน คาความยากงาย และคาอ านาจจ าแนก และขนตอนการทดสอบสมมตฐานวาการสมแบบเกาและแบบใหมมคาความไดเปรยบเสยเปรยบในเรองความยากงายไมแตกตางกนดวยคาสถต t-test
3.4.1 เกณฑการวเคราะหและประเมนคณภาพของแบบทดสอบ เกณฑการวเคราะหและประเมนคณภาพของแบบทดสอบสามารถพจารณาไดตามเกณฑ
ดงน [วภาวรรณ, 2548] 1) ความเชอมน (Reliability) เกณฑการแปลความหมายความเชอมนของ
แบบทดสอบ มดงน คาสมประสทธความเชอมน = 0.01 – 0.19 หมายถง มความเชอมนต ามาก คาสมประสทธความเชอมน = 0.20 – 0.39 หมายถง มความเชอมนต า คาสมประสทธความเชอมน = 0.40 – 0.59 หมายถง มความเชอมนต าปานกลาง คาสมประสทธความเชอมน = 0.60 – 0.79 หมายถง มความเชอมนคอนขางสง คาสมประสทธความเชอมน = 0.80 – 1.00 หมายถง มความเชอมนสงมาก
ในงานวจยนจะพจารณาวาขอสอบมความเชอมนทเหมาะสม หากมคาสมประสทธความเชอมน ไมต ากวา 0.60
2) ความยากงาย (Difficulty) การแปลความหมายคา P สามารถแปลความหมายไดดงน
DPU
36
คา P = 0.00 – 0.19 หมายถง ขอสอบขอนนยากเกนไป คา P = 0.20 – 0.39 หมายถง ขอสอบขอนนคอนขางยาก คา P = 0.40 – 0.59 หมายถง ขอสอบขอนนยากปานกลาง คา P = 0.60 – 0.79 หมายถง ขอสอบขอนนยากคอนขางงาย คา P = 0.80 – 1.00 หมายถง ขอสอบขอนนงายเกนไป ในงานวจยนจะพจารณาวาขอสอบมความยากงายทเหมาะสม หากมคา P อย
ในชวง 0.40 – 0.79 3) อ านาจจ าแนก (Discrimination) เกณฑการแปลความหมายคาอ านาจจ าแนก (r)
ของแบบทดสอบมดงน คา r = 0.60 - 1.00 หมายถง อ านาจจ าแนกดมาก คา r = 0.40 - 0.59 หมายถง อ านาจจ าแนกด คา r = 0.20 - 0.39 หมายถง อ านาจจ าแนกพอใช คา r = 0.10 - 0.19 หมายถง อ านาจจ าแนกต า (ควรปรบปรงหรอตดทง) คา r = -1.00 - 0.09 หมายถง อ านาจจ าแนกต ามาก(ควรปรบปรงหรอตดทง) ในงานวจยนจะพจารณาวาขอสอบมอ านาจจ าแนกทเหมาะสม หากมคา r ไมต า
กวา 0.40 3.4.2 ขนตอนการทดสอบสมมตฐานวาการสมแบบเกาและแบบใหมมคาความไดเปรยบ
เสยเปรยบในเรองความยากงายไมแตกตางกนดวยคาสถต t-test เมอไดคาสถตเรองคาความยากงายของแบบทดสอบแตละขอ จะน าคาดงกลาวมาใชใน
การค านวณคาความยากงายของแบบทดสอบแตละชดเพอพจารณาความไดเปรยบเสยเปรยบในการทดสอบ หากพบวาแบบทดสอบทไดจากการสมมคาความยากงายคอนขางแตกตางกน จะมการก าหนดเกณฑในการสมเลอกตามคาความยากงาย และท าการทดสอบเพอพสจนวาความไดเปรยบเสยเปรยบในเรองความยากงายของชดขอสอบในการสมแบบใหมมความแตกตางจากการสมแบบเดม โดยท าการทดลองสมขอสอบทงสน 100 รอบ และในแตละรอบไดสรางชดขอสอบทงสนจ านวน 2,000 ชด และค านวณความแตกตางของคาความยากงายของชดขอสอบทงายทสด และยากทสดในแตละรอบเพอน ามาใชทดสอบสมมตฐาน และทดสอบสมมตฐานดวยวธการ t-test โดยสมมตฐานทตง คอ
H0 : การสมทงสองวธมคาความไดเปรยบเสยเปรยบในเรองความยากงายไมแตกตางกน H1 : การสมทงสองวธมคาความไดเปรยบเสยเปรยบในเรองความยากงายแตกตางกน
DPU
37
ในขนตอนแรกจะเปนการทดสอบเพอพจารณาวาคาความแปรปรวนของประชากรเทากนหรอไม โดยใช Levene's Test เพอน าไปใชในการพจารณาเลอกสถตทเหมาะสมในการทดสอบสมมตฐาน
ขนตอมาเปนการใชสถต t-test ทเหมาะสมกบกลมประชากรในการทดสอบสมมตฐาน และน าคา t ทค านวณไดไปเปรยบเทยบกบคา t ในตาราง t-test เพอยอมรบหรอปฏเสธสมมตฐาน
DPU
บทท 4 ผลการวจย
ในบทนจะกลาวถงผลการวเคราะหและประเมนคณภาพแบบทดสอบออนไลน ระบบ
การน าเสนอผลการวเคราะหและประเมนคณภาพ โดยมรายละเอยดดงตอไปน 4.1 ผลการพฒนาระบบ 4.2 ผลการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน 4.3 การปรบปรงการสมเลอกค าถาม และการทดสอบสมมตฐาน
4.1 ผลการพฒนาระบบ ระบบวเคราะหและประเมนคณภาพของแบบทดสอบออนไลนดานเทคโนโลย
สารสนเทศ เปนระบบเวบแอปพลเคชนซงพฒนาโดยใชโปรแกรมภาษาพเอชพ (PHP) ตดตอกบฐานขอมลเอสควแอลเซรฟเวอร (SQL Server) และใชโปรแกรมอาปาเช (Apache) เปนโปรแกรมเวบเซรฟเวอร
การใชงานระบบฯ ผใชงานจะตองท าการเขาสระบบโดยการกรอกชอผใชงานและรหสผาน เมอระบบท าการตรวจสอบชอผใชและรหสผานตรงกบทระบไวในระบบแลวจงสามารถท างานกบระบบตามสทธของผใช ภาพท 4.1 แสดงหนาจอเขาสระบบ DP
U
39
ภาพท 4.1 หนาจอเขาสระบบ หากผใชงานระบบกรอกชอผใชงานและรหสผานไมถกตอง ระบบจะท าการแจงเตอนเพอใหผใชงานระบบท าการกรอกชอผใชงานและรหสผานใหมเพอเขาสระบบดงภาพท 4.2
ภาพท 4.2 หนาจอแสดงขอผดพลาดในการเขาสระบบ หากผใชงานกรอกชอผใชและรหสผานทถกตอง จะปรากฏหนาจอหลกในการท างาน
ดงภาพท 4.3
DPU
40
ภาพท 4.3 หนาจอหลกในการท างาน
หากผใชตองการดขอมลการวเคราะหและประเมนคณภาพแบบทดสอบออนไลน ใหน าเมาสไปวางทเมนออกรายงาน จะปรากฏเมนยอย ใหคลกเลอกทเมนยอยทตองการ ดงภาพท 4.4
ภาพท 4.4 หนาจอแสดงเมนยอยการออกรายงาน
DPU
41
หากผใชตองการแสดงขอมลการวเคราะหความเชอมนของแบบทดสอบใหคลกเลอกทเมนยอย การวเคราะหความเชอมนของแบบทดสอบ จะแสดงหนาจอการวเคราะหความเชอมนของแบบทดสอบดงภาพท 4.5
ภาพท 4.5 หนาจอแสดงขอมลการวเคราะหความเชอมนของแบบทดสอบ
หากผใชตองการแสดงขอมลความยากงายของแบบทดสอบใหคลกเลอกทเมนยอย การวเคราะหความยากงายของแบบทดสอบ จะแสดงหนาจอดงภาพท 4.6 – 4.8 โดยผใชสามารถเลอกแสดงขอมลตามหวขอ รวมกบคาระดบความยากงายทตองการ โดยสามารถเลอกแสดงขอมลได 3 รปแบบ คอ 1) รายขอสอบ (ทกขอ) ดงภาพท 4.6 2) รายขอสอบ เฉพาะหวขอทตองการ ดงภาพท 4.7 ทแสดงขอมลเฉพาะขอสอบประเภท Microsoft Word แบบปฏบตตามล าดบ (Captivate Word) 3) แสดงคาความยากงายตามหวขอ ดงภาพท 4.8 ทแสดงคาความยากงายเฉลยของขอสอบแตละหวขอ DP
U
42
ภาพท 4.6 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยแสดงรายขอสอบ (ทกขอ)
ภาพท 4.7 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยแสดงรายขอสอบ (เฉพาะหวขอทตองการ)
DPU
43
ภาพท 4.8 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยจ าแนกตามหวขอ
นอกจากนผใชอาจเลอกสบคนรวมกบระดบความยากงายในระดบตางๆทตองการได ดง
ภาพท 4.9 ทเลอกดขอสอบแบบ Microsoft Excel แบบปฏบตตามล าดบ (Captivate Excel) ทมคาความยากงาย อยในกลมขอสอบยาก (0.00 – 0.19)
ภาพท 4.9 หนาจอแสดงขอมลการวเคราะหความยากงายของแบบทดสอบ โดยสบคนตามระดบความยากงาย
DPU
44
โดยในการแสดงขอมลจ าแนกรายขอผใชสามารถคลกเลอกทแวนขยายดานหลงขอความเพอแสดงรายละเอยดในรปแบบกราฟทจ าแนกสถตการตอบค าถามของนกศกษาในขอค าตอบตางๆ ดงภาพท 4.10
ภาพท 4.10 หนาจอแสดงกราฟจ าแนกสถตการตอบค าถามของนกศกษาในขอค าตอบทงหมด
หากผใชตองการแสดงขอมลอ านาจจ าแนกของแบบทดสอบใหคลกเลอกทเมนยอย การ
วเคราะหอ านาจจ าแนกของแบบทดสอบ จะแสดงหนาจอดงภาพท 4.11 – 4.12 โดยภาพท 4.11 เปนหนาจอแสดงขอมลอ านาจจ าแนกของแบบทดสอบ (รายขอสอบ) และภาพท 4.12 เปนหนาจอแสดงขอมลอ านาจจ าแนกของแบบทดสอบ (ตามหวขอ) DP
U
45
ภาพท 4.11 หนาจอแสดงขอมลอ านาจจ าแนกของแบบทดสอบ (รายขอสอบ)
ภาพท 4.12 หนาจอแสดงขอมลอ านาจจ าแนกของแบบทดสอบ (ตามหวขอ)
DPU
46
4.2 ผลการวเคราะหและการประเมนคณภาพแบบทดสอบออนไลน รายละเอยดการวเคราะหแบบทดสอบออนไลนทใชประเมนทกษะดานเทคโนโลย
สารสนเทศ มรายละเอยดดงน 4.2.1 ขอมลสรปในภาพรวม
ในสวนนเปนการน าเสนอขอมลสถตตางๆทเกยวของในงานวจย โดยตารางท 4.1 น าเสนอขอมลรายละเอยดของแบบทดสอบการประเมนทกษะดานเทคโนโลยสารสนเทศ โดยแบงตามประเภทของขอสอบและหวขอของแบบทดสอบ
ตารางท 4.1 ขอมลแบบประเมนทกษะดานเทคโนโลยสารสนเทศ
ประเภทค าถาม จ านวน (ขอ) รอยละ 1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ 1232 78.22 2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ
2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
82 65
196
5.21 4.13
12.44 รวม 1575 100
รายละเอยดจ านวนการเขาทดสอบทกษะดานเทคโนโลยสารสนเทศของนกศกษาใน
ภาคเรยนท 1/2554 และ 2/2554 น าเสนอในตารางท 4.2
ตารางท 4.2 จ านวนการทดสอบทกษะดานเทคโนโลยสารสนเทศ ภาคเรยน จ านวน (ครง) รอยละ ภาคเรยนท 1/2554 1685 37.06 ภาคเรยนท 2/2554 2862 62.94
รวม 4547 100 รายละเอยดจ านวนผทสอบผานแบบทดสอบทกษะดานเทคโนโลยสารสนเทศ น าเสนอ
ในตารางท 4.3 โดยผทสอบผานแบบทดสอบในปการศกษา 2554 ทงหมดจ านวน 404 คน คดเปนรอยละ 8.88 ของจ านวนผเขาทดสอบทงหมด
DPU
47
ตารางท 4.3 จ านวนผทสอบผานแบบทดสอบ ภาคเรยน จ านวน (ครง) รอยละ
ภาคเรยนท 1/2554 182 45.05 ภาคเรยนท 2/2554 222 54.95
รวม 404 100 ขอมลในตารางท 4.4 น าเสนอขอมลเกรดในรายวชา IT206 ของนกศกษาทเขาทดสอบ
ซงขอมลนจะถกน ามาใชในการวเคราะหเกยวกบคณสมบตอ านาจจ าแนกของขอสอบ หรอความสามารถของแบบทดสอบทสามารถจ าแนกระหวางคนทเกงและคนทออนออกจากกนได
ตารางท 4.4 เกรดในรายวชา IT206 ของนกศกษาทเขาทดสอบ
เกรด ภาคเรยนท 1/2554 ภาคเรยนท 2/2554
จ านวน (คน) รอยละ จ านวน (คน) รอยละ เกรด A 438 33.54 740 53.27 เกรด B+ 127 9.72 119 8.57 เกรด B 164 12.56 103 7.42 เกรด C 144 11.02 94 6.77 เกรด C 117 8.96 110 7.92 เกรด D+ 83 6.36 72 5.18 เกรด D 85 6.51 79 5.69 เกรด F 148 11.33 72 5.18
รวม 1306 100 1389 100 หมายเหต มนกศกษาทเขาทดสอบ โดยไมไดลงทะเบยนเรยนวชา IT206 ในภาคเรยนท 1
จ านวน 379 คน และในภาคเรยนท 2 จ านวน 1,473 คน
4.2.2 ผลการวเคราะหความเชอมนของแบบทดสอบ การวเคราะหความเชอมนของแบบทดสอบเปนการพจารณาความคงทของผลการวด
โดยใชวธการของคเดอร-รชารดสน (Kuder Richardson) โดยผลการวเคราะห พบวาแบบทดสอบออนไลนส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศมคาสมประสทธความเชอมน เทากบ
DPU
48
0.96 ดงนน สรปไดวาแบบทดสอบออนไลนทใชประเมนทกษะดานเทคโนโลยสารสนเทศมความเชอมนทเหมาะสม
4.2.3 ผลการวเคราะหความยากงาย (Difficulty) ความยากงายของแบบทดสอบแตละขอพจารณาจากคาสดสวนของการตอบขอสอบนน
ถกจากจ านวนผท าแบบทดสอบทงหมด [Mehrens, 1991] ในงานวจยนจะพจารณาวาขอสอบมความยากงายทเหมาะสม หากมคา P อยในชวง 0.40 – 0.79 ผลการวเคราะหความยากงายของแบบทดสอบส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศมรายละเอยด ดงตารางท 4.5 – 4.6 ตารางท 4.5 ผลการวเคราะหความยากงายโดยจ าแนกตามชวงความยากงาย
ประเภทค าถาม ยาก
(0.00-0.19)
คอนขางยาก
(0.20-0.39)
ปานกลาง
(0.40-0.59)
คอนขาง งาย
(0.60-0.79)
งาย
(0.80-1.00)
รวม (ขอ)
คาเฉลยความยากงาย
1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ
229 426 291 225 60 1,232 0.39
2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ
2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
รวม
31 24
174 198
24 25 16 65
21 8 3
32
5 8 3
16
1 0 0 1
82 65
196 343
0.17 0.28 0.02 0.11
รวมทงหมด 458 491 323 241 61 1,575 0.34 DP
U
49
ตารางท 4.6 ผลการวเคราะหความยากงายโดยสรป ประเภทค าถาม Max P Min P Average P แปลผลจาก Average P
1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ
0.91 0.02 0.39 ขอสอบคอนขางยาก
2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ
2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
รวม
0.78 0.76 0.35 0.78
0.00 0.00 0.00 0.00
0.17 0.28 0.02 0.11
ขอสอบยากเกนไป ขอสอบคอนขางยาก ขอสอบยากเกนไป ขอสอบยากเกนไป
รวมทงหมด 0.91 0.00 0.34 ขอสอบคอนขางยาก
จากตารางท 4.6 พบวาแบบทดสอบออนไลนทใชประเมนทกษะดานเทคโนโลยสารสนเทศมคาความยากงาย โดยเฉลยของขอสอบท งหมด เทากบ 0.34 ดงน นสรปไดวาแบบทดสอบออนไลนทใชประเมนทกษะดานเทคโนโลยสารสนเทศเปนขอสอบทคอนขางยาก และเมอน าขอสอบทอยในกลมยากมาตรวจสอบละเอยดลงไป พบวามขอสอบจ านวนหนง ไมเคยมนกศกษาคนใดท าถกเลย ไดแก ขอสอบ Microsoft Word จ านวน 1 ขอ และขอสอบ Microsoft Excel จ านวน 43 ขอ และอกกลมหนงทมนกศกษาเคยท าถก รายละเอยดแสดงได ตามตารางท 4.7 DP
U
50
ตารางท 4.7 ผลการวเคราะหขอสอบทอยในกลมยาก
ประเภทค าถาม
ขอสอบทไมมนกศกษาเคยท าถก
เลย
ขอสอบทมนกศกษา เคยท าถก
รวม
จ านวน รอยละ จ านวน รอยละ จ านวน รอยละ 1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ
0 0.00 229 100 229 100
2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ
2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
รวม
1 0
43 44
3.22 0.00
24.71 0.19
30 24
131 185
96.77 100
75.29 0.81
31 24
174 229
100 100 100 100
รวมทงหมด 44 9.61 414 90.39 458 100
เมอวเคราะหลงไปรายขอพบวาขอสอบทไมเคยมนกศกษาท าถกเลยนน มขอสอบ จ านวน 29 ขอ ทเปนขอสอบทมขอผดพลาด ซงอาจเกดจากการจดท าขอสอบ และขอสอบอกจ านวน 15 ขอ เปนขอสอบทถกตอง ไมมขอผดพลาด ซงสาเหตทไมมนกศกษาท าถกเลย อาจมไดหลายสาเหตดงน
1. เปนขอสอบทมเนอหาคอนขางยาก เปนค าถามเกยวกบการใช Excel ขนสง เชน เปนการใชเครองมอเพอวเคราะหในเรอง What-if Analysis
2. มขนตอนในการท างานหลายขนตอน 3. กรณทตองใสค าตอบเปนสตรในโปรแกรม Excel บางขอค าถามสามารถมค าตอบท
ถกตองไดหลายค าตอบ แตเมอนกศกษาตอบไมตรงกบทอาจารยเฉลย ท าใหโปรแกรมตรวจเปนค าตอบทผด ซงมหลายรปแบบ ดงน
3.1 สตรทมเงอนไข อาจใสเงอนไขไดหลายรปแบบ กใหค าตอบเหมอนกน เชน การตดเกรดทถานกศกษาไดคะแนน 80-100 จะไดเกรด A และคะแนน 70-79 จะไดเกรด B อาจเขยนค าตอบไดเปน if(C10 >= 80, ‘A’, if(C10 >= 70, ‘B’, …)) หรอ if( C10 > 79, ‘A’, if(C10 > 69, ‘B’, …))
DPU
51
3.2 ค าตอบทเปนสตรค านวณ บางค าตอบอาจใสหรอไมใส ( ) กใหค าตอบเหมอนกน
3.3 สตรค านวณ การบวก หรอการคณ การใสตวเลขสลบกนกใหค าตอบเหมอนกน
3.4 สตรประเภท vlookup หรอ hlookup การก าหนดพนทเซลลทพจารณาลงในสตร การเลอกหรอไมเลอกหวตาราง กใหค าตอบเหมอนกน
ทงนขอสอบทมปญหาทไมเคยมนกศกษาท าถกเลยไดถกน าออกจากชดขอสอบแลว เพอใหอาจารยผออกขอสอบไดท าการปรบปรงแกไขตอไป ทงนควรมการก าหนดขอตกลงในการออกขอสอบทตองมการเขยนสตร ใหสามารถตรวจสอบไดทกแนวทางทเปนค าตอบทถกตอง
4.2.4 อ านาจจ าแนก (Discrimination) อ านาจจ าแนก คอ ความสามารถของแบบทดสอบทสามารถจ าแนกระหวางคนทเกงและ
คนทออนออกจากกนได [Mehrens, 1991] โดยในงานวจยนไดน าเกรดของนกศกษาในวชา IT206 มาชวยในการจ าแนกกลมเกง และกลมออน โดยก าหนดใหนกศกษาทไดเกรด A, B+, B และ C+ เปนนกศกษาในกลมเกง และนอกเหนอจากนเปนนกศกษาในกลมออน
ในงานวจยนจะพจารณาวาขอสอบมอ านาจจ าแนกทเหมาะสม หากมคา r ไมต ากวา 0.40 ผลการวเคราะหอ านาจจ าแนกแบบทดสอบส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศมรายละเอยด ดงตารางท 4.8 ตารางท 4.8 ผลการวเคราะหอ านาจจ าแนก
ประเภทค าถาม Max r Min r Average r แปลผลจาก Average r 1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ
1.26 0.46 0.87 อ านาจจ าแนกดมาก
2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ 2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
รวม
1.17 1.09 1.29 1.29
0.61 0.63 0.49 0.49
0.86 0.86 0.86 0.86
อ านาจจ าแนกดมาก อ านาจจ าแนกดมาก อ านาจจ าแนกดมาก อ านาจจ าแนกดมาก
รวมทงหมด 1.29 0.46 0.87 อ านาจจ าแนกดมาก
DPU
52
จากตารางท 4.8 พบวาแบบทดสอบออนไลนทใชประเมนทกษะดานเทคโนโลย
สารสนเทศมคาอ านาจจ าแนกโดยเฉลยของขอสอบท งหมด เทากบ 0.87 ดงน น สรปไดวาแบบทดสอบออนไลนทใชประเมนทกษะดานเทคโนโลยสารสนเทศมคาอ านาจจ าแนกดมาก 4.3 การปรบปรงการสมเลอกค าถาม และการทดสอบสมมตฐาน
นอกจากการวเคราะหคณสมบตทง 3 ดานของแบบทดสอบ ไดแก คาความเชอมน คาความยากงาย และคาอ านาจจ าแนกของแบบทดสอบในภาพรวมแลว ผวจยไดน าคณสมบตคาความยากงายของแบบทดสอบแตละขอมาใชในการวเคราะหการสมค าถามในแบบทดสอบแตละชด เพอพจารณาความยตธรรมหรอความแตกตางดานความยากงายของแบบทดสอบแตละชด พบวาคาความยากงายของชดแบบทดสอบทถกสมเลอกจ าแนกตามหวขอ แสดงไดดงตารางท 4.9 โดยพบวาขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ มคาความยากงายเฉลยของชดขอสอบทงายทสด เปน 0.49 ชดทยากทสดเปน 0.39 และโดยเฉลยมคาความยากงายเปน 0.42 ซงมคาความแตกตางระหวางชดทงายและชดทยากไมมากนก หรอมคาความยากงายแตกตางกนประมาณ 0.49 - 0.39 = 0.10 เนองจากขอสอบประเภทนอยเปนจ านวนมากคอ 1,232 ขอ และมการสมขอสอบเพอน ามาใชสอบชดละ 100 ขอ ท าใหมการกระจายการสมคอนขางด สวนขอสอบ Microsoft Office แบบปฏบตตามล าดบ มคาความยากงายเฉลยของค าถามในชดขอสอบทงายทสด เปน 0.44 ชดทยากทสดเปน 0.07 และโดยเฉลยมคาความยากงายเปน 0.22 และมคาความยากงายของขอสอบทถกสมเลอกตามหวขอตางๆ ตามตารางท 4.9 จะเหนวาชดขอสอบทงาย และชดขอสอบทยาก มคาความยากงายแตกตางกนคอนขางมาก หรอแตกตางกนประมาณ 0.44 - 0.07 = 0.37 ท าใหมการไดเปรยบเสยเปรยบกนในการทดสอบอยางมาก กลาวคอนกศกษาทไดชดขอสอบทงายมโอกาสทดสอบผานมากกวานกศกษาทไดชดขอสอบทยาก โดยสาเหตทคาความยากงายในแตละชดขอสอบมความแตกตางกนคอนขางมาก เนองจากขอสอบประเภทนในแตละหวขอมจ านวนไมมาก และมการสมเลอกเพยงหวขอละ 10 ขอ ดงนนจงเปนไปไดวาในบางชดขอสอบมการสมเลอกไดขอยากจ านวนมาก และบางชดขอสอบมการสมเลอกไดของายจ านวนมาก
DPU
53
ตารางท 4.9 คาความยากงายของขอสอบทถกสมเลอกกอนมการปรบคาการสม
ประเภทค าถาม Max
Difficulty
Min
Difficulty
Average
Difficulty
1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ
0.49 0.39 0.42
2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ
2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
รวม
0.50 0.54 0.28 0.44
0.08 0.10 0.01 0.07
0.28 0.29 0.10 0.22
รวมทงหมด 0.44 0.30 0.37
ดงนนผวจยจงไดท าการปรบการสมเลอกขอสอบโดยใหมน าหนกในการกระจายการสมในแตระดบความยากงายตามอตราสวนจ านวนขอสอบ ดงแสดงในตารางท 4.10 และเนองดวยขอสอบ Microsoft Office แบบปฏบตตามล าดบ มขอสอบทงายคอนขางนอย ผวจยจงไดก าหนดใหมการสมเลอกขอสอบทมคาความยากงายอยในชวง ปานกลาง คอนขางงาย และงาย อยในกลมเดยวกน และสมเลอกรวมกน ตารางท 4.10 อตราสวนการสมเลอกขอสอบในแตละหวขอจ าแนกตามคาความยากงาย
ประเภทค าถาม ยาก
(0.00-0.19)
คอนขางยาก
(0.20-0.39)
ปานกลาง
(0.40-0.59)
คอนขาง งาย
(0.60-0.79)
งาย
(0.80-1.00)
รวม (ขอ)
1. ขอสอบค าศพททาเทคโนโลยสารสนเทศ แบบเลอกตอบ
18 35 24 18 5 100
2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ
2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
4 4 7
3 4 2
3 2 1
10 10 10
DPU
54
เมอท าการปรบการสมเลอกขอสอบใหกระจายการสมตามระดบความยากงายแลว ผวจยได
ท าการทดลองสมแบบทดสอบขนจ านวน 2000 ชด พบวาคาความยากงายของขอสอบทถกสมเลอกหลงการปรบคาการสมสามารถแสดงไดดงตารางท 4.11 ซงจะเหนวาคาความแตกตางของชดขอสอบทงายทสด และยากทสด มคาความแตกตางลดลง หรอมคาความยากงายแตกตางกนประมาณ 0.40 - 0.35 = 0.05 ตารางท 4.11 ความแตกตางของคาความยากงายของชดขอสอบหลงการปรบคาการสม
ประเภทค าถาม Max
Difficulty
Min
Difficulty
Average
Difficulty
1. ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ
0.43 0.40 0.42
2. ขอสอบ Microsoft Office แบบปฏบตตามล าดบ 2.1 Microsoft Word 2.2 Microsoft PowerPoint 2.3 Microsoft Excel
รวม
0.34 0.34 0.20 0.28
0.22 0.21 0.09 0.09
0.27 0.26 0.15 0.23
รวมทงหมด 0.40 0.35 0.37
ดงนนเพอพสจนวาความไดเปรยบเสยเปรยบในเรองความยากงายของชดขอสอบในการสมแบบใหมมความแตกตางจากการสมแบบเดม ผวจยไดท าการตงสมมตฐาน และทดสอบสมมตฐานดวยวธการ t-test ดงน
H0 : การสมทงสองวธมคาความไดเปรยบเสยเปรยบในเรองความยากงายไมแตกตางกน H1 : การสมทงสองวธมคาความไดเปรยบเสยเปรยบในเรองความยากงายแตกตางกน โดยในการทดลองผวจยไดท าการสมขอสอบทงสน 100 รอบ และในแตละรอบได
สรางชดขอสอบทงสนจ านวน 2000 ชด และค านวณความแตกตางของคาความยากงายของชดขอสอบทงายทสด และยากทสดในแตละรอบเพอน ามาใชทดสอบสมมตฐาน
DPU
55
ขนตอนแรกเปนการทดสอบเพอพจารณาวาคาความแปรปรวนของประชากรเทากนหรอไม โดยใช Levene's Test เพอน าไปใชในการพจารณาเลอกสถตทน ามาใชทดสอบสมมตฐานขางตน ซงผลการทดสอบแสดงไดตามตารางท 4.12
ตารางท 4.12 คาสถตการทดสอบความเปนอสระตอกนของขอมล 2 กลม (Independent Samples Test)
Levene's Test for Equality of
Variances t-test for Equality of Means
F Sig. t df Sig.
(2 tailed) Mean
Difference Std. Error Difference
95% Confidence Interval of the
Difference Lower Upper
X
Equal Variance assumed 81.368 0.000 125.429 198 0.000 0.099 0.001 0.097 0.100 Equal Variance not assumed 125.429 117.251 0.000 0.099 0.001 0.097 0.100
Levene's Test for Equality of Variances เปนการทดสอบวาคาความแปรปรวนของ
ประชากรเทากนหรอไม โดยใชคาสถตของเลอวน (Levene's test: L) ทมการแจกแจงแบบ F ทองศาอสระเปน k-1 และ (ni-1)
H0: คาความแปรปรวนของประชากรเทากน H1: คาความแปรปรวนของประชากรไมเทากน จากผลการวเคราะหคา F-test = 81.368 Sig. = 0.000 Critical Value (a=0.05) = F-table
=3.889 จงปฏเสธ H0 สรปวา คาความแปรปรวนของประชากรไมเทากน ใหใชสถตทดสอบ t จาก t-test for Equality of Means ในสวน Equal Variances not assumed
คา t หมายถง คาสถตในการทดสอบ H0: μ1 = μ2 ในทน t = 125.429 สวน t-table .05 = 1.980447599
คา df หมายถง คาองศาอสระของ t ในทน df =117 Sig.(2-tailed) หมายถง คา Significance ของการทดสอบ 2 หางของคา t = 0.000 ซง
นอยกวา α = 0.05 Mean Difference หมายถง ผลตางของคาเฉลย = 0.099
DPU
56
Std. Error Difference หมายถง คาคลาดเคลอนมาตรฐานของคาเฉลยของคาแตกตาง (SEd) = 0.001
95% Confidence Interval of the Difference หมายถง คาชวงความเชอมนท 95% คอ0.097 < μ1- μ2 < 0.100 หรอผลตางของคาเฉลยระหวาง 0.097 ถง 0.100
สรปผลการทดสอบสมมตฐานดวยสถตทดสอบ t จาก t-test for Equality of Means ซง
เปนการทดสอบวาการสมทงสองวธมคาความไดเปรยบเสยเปรยบในเรองความยากงายแตกตางกนหรอไม สามารถแสดงไดตามตารางท 4.13
ตารางท 4.13 คาสถตในการทดสอบเปรยบเทยบความแตกตางของคาความยากงายเฉลยของการสม 2 แบบ
N Mean S.D. ผลตางของคาเฉลย t df Sig 1 tailed
การสมแบบท 1 100 0.13 0.01 0.10 125.429 117 0.000
การสมแบบท 2 100 0.03 0.00
จากตารางท 4.13 พบวา การทดสอบความแตกตางของคาเฉลยทงสองกลมของการสม
แบบทดสอบของแบบท 1 มคาเฉลย เทากบ 0.13 วธท 2 มคาเฉลย เทากบ 0.03 เมอเปรยบเทยบแลวมความแตกตางกนเทากบ 0.10 ดงนนจากการทดสอบสถต t พบวา คาเฉลยความไดเปรยบเสยเปรยบในเรองความยากงายของการสมแบบท 1 สงกวาแบบท 2 อยางมนยส าคญทางสถตทระดบ .05
ดงนนจงสรปไดวาการสมเลอกแบบใหมท าใหคาความไดเปรยบเสยเปรยบในเรองความยากงายลดลงกวาการสมแบบเดมอยางมนยส าคญทางสถตทระดบ .05
DPU
บทท 5 สรปผลการวจย
5.1 สรปผลการวจย ระบบการวเคราะหและประเมนคณภาพของแบบทดสอบออนไลน น มวตถประสงคเพอตรวจสอบคณภาพและความนาเชอถอของแบบทดสอบ โดยเนนทแบบประเมนทกษะดานเทคโนโลยสารสนเทศ และเปนการวเคราะหและประเมนคณภาพแบบทดสอบใน 3 คณสมบต คอ ความเชอมน (Reliability) ความยากงาย (Difficulty) และอ านาจจ าแนก (Discrimination) ซงด าเนนการวจยโดยการพฒนาระบบในการวเคราะหและประเมนคณภาพของแบบทดสอบออนไลนทเปนเครองมอเพออ านวยความสะดวกในการวเคราะหแบบทดสอบ ท าใหมความรวดเรว ถกตอง มความนาเชอถอ และสามารถน าผลการวเคราะหขอสอบมาใชในการปรบการสมแบบทดสอบเพอใหเกดความยตธรรมแกผเขาทดสอบมากยงขน ขนตอนในการท าวจยเรมจากการรวบรวมขอมล ศกษาทฤษฎการวเคราะหและประเมนคณภาพของแบบทดสอบ วเคราะหและออกแบบระบบงาน จากนนจงพฒนาโปรแกรมเพอเกบขอมลการท าแบบทดสอบของนกศกษา น าขอมลทไดมาวเคราะหเพอประเมนคณภาพของแบบทดสอบออนไลน และพฒนาระบบเพอน าเสนอผลประเมนในรปแบบตารางและกราฟทผใชสามารถสบคนขอมลไดตามตองการ โดยผวจยไดพฒนาระบบดวยโปรแกรมภาษา PHP และใชโปรแกรมจดการฐานขอมล SQL Server ในการจดเกบขอมล ผลการวจยในการวเคราะหและประเมนคณภาพของแบบทดสอบออนไลนสามารถสรปไดดงน 1) คาความเชอมน (Reliability): ในงานวจยนก าหนดวาขอสอบจะมความเชอมนทเหมาะสม หากมคาสมประสทธความเชอมน ไมต ากวา 0.60 และจากการวจยพบวาแบบทดสอบออนไลนส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศมคาสมประสทธความเชอมน เทากบ 0.96 จงสรปไดวา แบบทดสอบออนไลนส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศ เปนแบบทดสอบมคาความเชอมนทเหมาะสม 2) คาความยากงาย (Difficulty): ในงานวจยนก าหนดวาขอสอบจะมความยากงายทเหมาะสม หากมคาความยากงายอยในชวง 0.40 – 0.79 และจากการวจยพบวา เมอวเคราะหตามประเภทขอสอบแสดงใหเหนวา ขอสอบประเภทแรก ซงเปนขอสอบค าศพททางเทคโนโลย
DPU
58
สารสนเทศ แบบเลอกตอบ มคาความยากงาย เทากบ 0.39 ซงแปลความหมายไดวา ขอสอบแบบเลอกตอบเปนขอสอบทคอนขางยาก สวนขอสอบประเภททสอง ซงเปนขอสอบ Microsoft Office แบบปฏบตตามล าดบ มคาความยากงาย เทากบ 0.11 ซงแปลความหมายไดวา แบบปฏบตตามล าดบเปนขอสอบทยากเกนไป และโดยเฉลยของขอสอบทงหมด มคาความยากงาย เทากบ 0.34 จงสรปไดวา แบบทดสอบออนไลนส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศ เปน แบบทดสอบทคอนขางยาก 3) อ านาจจ าแนก (Discrimination): ในงานวจยนก าหนดวาขอสอบจะมคาอ านาจจ าแนกทเหมาะสม หากมคาอ านาจจ าแนกไมต ากวา 0.40 และจากการวจยพบวา เมอวเคราะหตามประเภทขอสอบแสดงใหเหนวา ขอสอบประเภทแรก ซงเปน ขอสอบค าศพททางเทคโนโลยสารสนเทศ แบบเลอกตอบ มคาอ านาจจ าแนก เทากบ 0.87 ซงแปลความหมายไดวา ขอสอบแบบเลอกตอบ มคาอ านาจจ าแนกดมาก สวนขอสอบประเภททสอง ซงเปนขอสอบ Microsoft Office แบบปฏบตตามล าดบ มคาอ านาจจ าแนก เทากบ 0.86 ซงแปลความหมายไดวา ขอสอบแบบปฏบตตามล าดบมคาอ านาจจ าแนกดมาก และโดยเฉลยของขอสอบทงหมด มคาอ านาจจ าแนก เทากบ 0.87 จงสรปไดวา แบบทดสอบออนไลนส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศ เปน แบบทดสอบทมคาอ านาจจ าแนกดมาก 5.2 อภปรายผลการวจย
จากผลการวจยพบวาแบบทดสอบออนไลนส าหรบประเมนทกษะดานเทคโนโลยสารสนเทศ เปนแบบทดสอบมคาความเชอมนทเหมาะสม หรอมความคงทของผลการวด และเปนแบบทดสอบทมคาอ านาจจ าแนกดมาก หรอสามารถจ าแนกผเรยนออกเปนกลมตางๆไดอยางด และเมอพจารณาคณสมบตดานความยากงาย พบวาขอสอบแบบเลอกตอบซงเปนค าถามเกยวกบค าศพททางเทคโนโลยสารสนเทศเปนขอสอบทคอนขางยาก เนองจากขอสอบทมในระบบมจ านวนถง 1,232 ขอ และคอนขางมความหลากหลาย อาจมทงค าศพททนกศกษาคนเคย และไมคนเคย ตวอยางค าศพททนกศกษานาจะคนเคย แตนกศกษาอาจจะไมไดเตรยมตวมาในการสอบ ท าใหไมสามารถตอบค าถามได เชน ค าถาม “ขอใด หมายถง HD DVD (High Definition DVD)” มคาความยากงาย เทากบ 0.13 หรอ เปนขอสอบทยากเกนไป และตวอยางค าศพททนกศกษาคอนขางคนเคย และสวนใหญคอนขางท าขอสอบได เชน ค าถาม “Youtube เปนเวบไซตทใหบรการแบบใด” มคาความยากงาย เทากบ 0.95 หรอ เปนขอสอบทงาย ตวอยางค าศพททนกศกษาทวไปอาจจะไมคนเคย แตหากเปนผทศกษาในสาขาเทคโนโลยสารสนเทศและคอมพวเตอรนาจะทราบ เชน ค าถาม “ขอใดกลาวถกตองเกยวกบการท างานของ Hub” มคาความยากงาย เทากบ 0.08 หรอ เปนขอสอบทยากเกนไป
DPU
59
อยางไรกตามจากการวเคราะหพบวาขอสอบทอยในกลมขอสอบทยากเกนไปหลายขอค าถามเปนค าศพททไมใชค าศพทพนฐานทางเทคโนโลยสารสนเทศ เชน ค าถาม “ขอใดไมถกตองเกยวกบภาษา Perl” มคาความยากงาย เทากบ 0.171 หรอ เปนขอสอบทยากเกนไป ท าใหนกศกษาไมสามารถท าขอสอบได ดงนนควรจะมการแบงระดบของขอสอบหลายๆระดบ เชน ขอสอบเพอวดทกษะทางเทคโนโลยสารสนเทศ ในระดบพนฐาน ระดบปานกลาง และระดบสง
สวนผลการวเคราะหความยากงายของขอสอบ Microsoft Office แบบปฏบตตามล าดบ พบวาเปนขอสอบทยากเกนไป เนองจากบางขอค าถามตองมการปฏบตหลายขนตอนเพอใหไดผลตามทโจทยก าหนด ท าใหนกศกษาอาจไมเขาใจ และท าไมได และในการสรางขอสอบใชโปรแกรม Captivate ในการสราง และ export แบบทดสอบออกมาในรปแบบไฟลนามสกล .swf ซงมขอจ ากดทผทดสอบจะไมสามารถคลกเมาสขวาไดเพอปฏบตงานทตองการได ท าใหตองจ ากดวธการปฏบตเพอตอบค าถามโดยใหปฏบตจากการเลอกจากเมนและเครองมอทอยท Toolbar เทานน ดงนนนกศกษาอาจไมคนเคยในการปฏบตดวยเครองมอตามทโจทยก าหนด นอกจากนขอสอบ Microsoft Excel สวนใหญเปนการทดสอบเกยวกบการใชสตร ซงโปรแกรมจะตรวจสอบค าตอบทพมพสตรถกตองตามเฉลยเทานน แตในบางขอค าถามมค าตอบไดมากกวา 1 ค าตอบ ท าใหนกศกษาอาจตอบค าตอบทถกตองแตไมตรงกบทเฉลย จงท าใหไมไดคะแนน ดงนนควรมการก าหนดวธการหรอรปแบบในการเขยนสตรเพอใหนกศกษาเขยนสตรใหสอดคลองหรอมรปแบบเดยวกบเฉลยของอาจารย และยงพบวาขอสอบหลายขอมการประเมนความรของผเขาสอบในเรองเดยวกนดงนนจงควรมการก าหนดวตถประสงคของขอสอบแตละหวขอ และก าหนดจ านวนขอสอบในแตละหวขอเพอความหลากหลายของแบบทดสอบ
นอกจากนผวจยไดวเคราะหคาความยากงายของขอสอบแตละชดทนกศกษาแตละคนไดทดสอบซงเปนขอสอบทเกดจากการสมเลอก พบวามคาความแตกตางของความยากงายของชดขอสอบทยากทสดและงายทสดคอนขางมากซงไมยตธรรมส าหรบนกศกษาผเขาสอบ ผวจยจงไดปรบวธการสมเลอกขอสอบตามอตราสวนในแตละระดบความยากงาย และไดทดสอบทางสถตเพอพสจนวาการสมเลอกทงสองวธมคาเฉลยความไดเปรยบเสยเปรยบทแตกตางกนอยางมนยส าคญ และผลการวเคราะหดวยคาสถต t-test พบวาการสมเลอกแบบใหมท าใหคาความไดเปรยบเสยเปรยบในเรองความยากงายลดลงกวาการสมแบบเดมอยางมนยส าคญทางสถตทระดบ .05
DPU
60
5.3 ขอเสนอแนะ ขอเสนอแนะส าหรบเปนสวนหนงในการพจารณาแกไขปรบปรงและพฒนางานวจยใน
อนาคต มดงตอไปน 1) ควรมการก าหนดวตถประสงคของขอสอบ และมการประเมนคณภาพของ
ขอสอบในดานความสอดคลองกบวตถประสงค 2) ควรมการวเคราะหตวเลอกวาตวเลอกใดเปนตวเลอกทด และตวเลอกใดเปน
ตวเลอกทไมด เพอใชเปนตวอยางและแนวทางในการออกขอสอบ 3) ควรมระบบกรองขอสอบทมคาความยากงาย และคาอ านาจจ าแนกไมเหมาะสม
ไมใหถกสมเลอกมาใช และมการแจงขอมลกลบไปยงผออกขอสอบเพอพจารณา ปรบปรงขอสอบใหเหมาะสมกอนน ามาใชทดสอบอกครง
DPU
บรรณานกรม
DPU
62
บรรณานกรม
ภาษาไทย
หนงสอ กตต ภกดวฒนะกล และ พนดา พานชกล. (2546). คมภรการวเคราะหและออกแบบระบบ.
กรงเทพฯ: เคทพ คอมพ แอนด คอนซลท. กตตพงษ กลมกลอม. (2554). ออกแบบฐานขอมล-อยางมออาชพ. กรงเทพฯ : เคทพ คอมพ แอนด
คอนซลท. วภาวรรณ เอกวรรณง. (2548). เอกสารประกอบการสอน รายวชาหลกการวดและประเมนผล
การศกษา. คณะครศาสตร มหาวทยาลยราชภฏสวนสนนทา. สมบญ ภนวล. (2525). การประเมนผลและการสรางแบบทดสอบ. กรงเทพฯ:
ส านกพมพโอเดยนสโตร. สพฒน สกมลสนต. (2539). ธนาคารขอทดสอบและการทดสอบปรบเปลยนดวยคอมพวเตอร.
กรงเทพฯ: บรษท วทยพฒน จ ากด. สพฒน สกมลสนต. (2542). การวเคราะหขอทดสอบและตดเกรดดวยคอมพวเตอร. กรงเทพฯ:
บรษท วทยพฒน จ ากด. ศรชยกาญจนวาส. (2550). ทฤษฎการทดสอบแนวใหม. พมพครงท 3. กรงเทพฯ: โรงพมพแหง
จฬาลงกรณมหาวทยาลย. โอภาส เอยมสรวงศ. (2551). ระบบฐานขอมล. กรงเทพฯ: ซเอดยเคชน.
งานวจย
กตตมา เจรญหรญ. (2550). การพฒนาระบบการวเคราะหและการสรางคลงขอสอบผานเครอขาย
อนเทอรเนต ส าหรบมหาวทยาลยเอกชน. วารสารศรปทมปรทศน ปท 7 ฉบบท 2 กรกฎาคม – ธนวาคม 2550.
DPU
63
ทรงวฒ แซอง. (2552). ระบบการทดสอบออนไลนโดยวธเลอกจากความยากงาย . The 5th National Conference on Computing and Information Technology (NCCIT2009).
พชร ย าเทยง. (2555). การพฒนาโปรแกรมคลงขอสอบและระบบวเคราะหขอสอบอตโนมตเพอเพมประสทธภาพการประเมนผลการศกษา. การประชมวชาการมหาวทยาลยกรงเทพ 2555.
รงสรรค เลกมณ. (2540). ผลของตวแปรบางตวตอความเทยงตรงเชงสภาพและจ านวนขอสอบทใชในการทดสอบแบบปรบเหมาะกบความสามารถของผสอบดวยคอมพวเตอร . ปรญญานพนธครศาสตรดษฎบณฑตสาขาการทดสอบและวดผลการศกษา . มหาวทยาลย ศรนครนทรวโรฒ.
สโกศล วโนทยาพทกษ และสาธต วงศประทป. (2555). การพฒนาระบบคลงขอสอบออนไลนแบบมวงจรการวเคราะหขอสอบอตโนมต. วารสารวศวกรรมศาสตร มหาวทยาลยสยาม ปท 13 ฉบบท 2 เลขหนา 22-32 ปพ.ศ. 2555.
โสภา เทยงดาห, วรตน พงษศร และ จรฎฐา ภบญอบ. (2555). ระบบพฒนาคณภาพขอสอบแบบครบกระบวนการและมความเทยงตรงสง. การประชมวชาการทางคอมพวเตอรและเทคโนโลยสารสนเทศ (National Conference on Computer Information Technologies : CIT2012), เชยงใหม, หนา 161 – 167.
DP
U
64
ภาษาตางประเทศ
Proceeding Cronbach LJ. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16(3),
1951, 297333. Gronlund, N.E. (1990). Measurement and evaluation in Teaching. Prentice Hall College Div; 6
Sub edition. Kuder, G. F. and M. W. Richardson. (1937). The theory of the estimation of test reliability.
Psychometrika, 2, 151-160. Mehrens, A. W. and I. J. Lehmann. (1991). Measurement and Evaluation in Education and
Psychology. 4th edition, Wadsworth Publishing Company. Neil C. Rowe. (2004). Cheating in Online Student Assessment: Beyond Plagiarism. Online
Journal of Distance Learning Administration, Volume VII, Number II.
ELECTRONIC SOURCES Educational Testing Service. (n.d.). Graduate Record Examination–GRE. Retrieved September
14, 2011, fromhttp://www.ets.org/gre Graduate Management Admission Council. (n.d.). Graduate Management Admission Test –
GMAT. Retrieved September 14, 2011, from http://www.mba.com/the-gmat.aspx Half-Baked Software Inc. (n.d.). Hot Potatoes. Retrieved September 14, 2011, from
http://hotpot.uvic.ca/ IXL Learning. (n.d.). Quia. Retrieved September 14, 2011, from http://www.quia.com/web ZOHO Corp. (n.d.). Zoho Challenge: Online Tests Made Easy. Retrieved September 14, 2011,
from https://challenge.zoho.com/login.do
DPU
65
ประวตผเขยน ชอ-นามสกล ฐากร พฤกษวนประสต
ประวตการศกษา - วทยาศาสตรบณฑต (สถต) คณะวทยาศาสตร มหาวทยาลยเกษตรศาสตร พ.ศ. 2540
- วทยาศาสตรมหาบณฑต (การจดการระบบสารสนเทศ) คณะสถตประยกต สถาบนบณฑตพฒนบรหารศาสตร พ.ศ. 2543
ต าแหนงและสถานทท างานปจจบน หวหนาศนยพฒนาซอฟตแวร คณะเทคโนโลยสารสนเทศ
มหาวทยาลยธรกจบณฑตย ประสบการณท างาน ป 2543 - 2547 เจาหนาทวเคราะหระบบอาวโส
บรรษทเงนทนอตสาหกรรมแหงประเทศไทย ป 2547 - 2550 อาจารยประจ า คณะเทคโนโลยสารสนเทศ
มหาวทยาลยธรกจบณฑตย ป 2550 – ปจจบน หวหนาศนยพฒนาซอฟตแวร คณะเทคโนโลยสารสนเทศ
มหาวทยาลยธรกจบณฑตย DP
U
66
ประวตผเขยน
ชอ-นามสกล อรวรรณ อมสมบต ประวตการศกษา - วทยาศาสตรบณฑต (วทยาการคอมพวเตอร)
คณะวทยาศาสตร มหาวทยาลยเกษตรศาสตร พ.ศ. 2541
- วทยาศาสตรมหาบณฑต (การจดการระบบสารสนเทศ) คณะสถตประยกต สถาบนบณฑตพฒนบรหารศาสตร พ.ศ. 2543
- วศวกรรมศาสตรดษฎบณฑต (วศวกรรมคอมพวเตอร) คณะวศวกรรมศาสตร มหาวทยาลยเกษตรศาสตร พ.ศ. 2550
ต าแหนงและสถานทท างานปจจบน อาจารยประจ า คณะเทคโนโลยสารสนเทศ
มหาวทยาลยธรกจบณฑตย ประสบการณท างาน ป 2543 - 2550 อาจารยประจ า คณะเทคโนโลยสารสนเทศ
มหาวทยาลยธรกจบณฑตย ป 2551 - 2554 ผอ านวยการหลกสตรมหาบณฑต สาขาการจดการความร
คณะเทคโนโลยสารสนเทศ มหาวทยาลยธรกจบณฑตย ป 2555 – ปจจบน อาจารยประจ า คณะเทคโนโลยสารสนเทศ
มหาวทยาลยธรกจบณฑตย
DPU