Upload
mariko-ryan
View
214
Download
1
Embed Size (px)
DESCRIPTION
试卷与试题 分析方法 简介. 试卷的编制. 1. 测试目标与命题. 2. 组织命题. 确定三种题目的比例(基础题、能力题、拓展题). 命题蓝图与双向细目表. 审题. 3. 组织阅卷. 4. 试卷评价. 试卷评价. 一 . 试卷质量. 二 . 试题质量. 试卷质量. 1. 考试目的(通过性、选拔性、两者兼有)适宜性分析. 定性 -- 覆盖面. 定量 — 分数段. 2. 试卷内容的有效性分析. 定性 --- 内容效度、结构效度. 定量 ---- 目标关联效度. 3. 试卷编排的合理性分析. 试题应由易到难. 试题质量. 1. 试题的区分度与难度. - PowerPoint PPT Presentation
Citation preview
1. 考试目的(通过性、选拔性、两者兼有)适宜性分析
2. 试卷内容的有效性分析
3. 试卷编排的合理性分析
试卷质量
定量—分数段 定性 -- 覆盖面
定量 ---- 目标关联效度
试题应由易到难
定性 --- 内容效度、结构效度
1. 考试目的(通过性、选拔性、两者兼有)适宜性分析
观察试卷总得分的分数段07 年初三语文总分分数段
分数段 频数 百分率 累极百分率0-49 34 0.52 0.52
50-59 17 0.26 0.77
60-69 43 0.65 1.43
70-79 97 1.47 2.90
80-89 263 3.99 6.89
90-99 658 9.98 16.87
100-109 1508 22.88 39.75
110-119 2342 35.53 75.27
120-129 1454 22.06 97.33
130-139 174 2.64 99.97
140-150 2 0.03 100.00
Total 6592 100
高三语文分数段 人数 百分率 累计百分率0-49 172 2.80 2.80
50-59 15 0.24 3.04
60-69 68 1.11 4.15
70-79 296 4.81 8.96
80-89 100516.3
4 25.30
90-99 199932.5
0 57.80
100-109 201532.7
6 90.55
110-119 538 8.75 99.30
120-129 41 0.67 99.97
130-139 2 0.03 100.00
Total 6151100.00
100.00
高三数学分数段 人数 百分率 累计百分率0-49 388.00 6.31 6.31
50-59 174.00 2.83 9.14
60-69 251.00 4.08 13.22
70-79 398.00 6.47 19.69
80-89 528.00 8.58 28.27
90-99 715.00 11.62 39.90
100-109 954.00 15.51 55.41
110-1191104.0
0 17.95 73.35
120-129 918.00 14.92 88.28
130-139 490.00 7.97 96.24
140-150 231.00 3.76 100
Total6151.0
0 100.00 100.00
07 年初三数学总分分数段分数段 频数 百分率 累计百分率0-49 分 358 5.43 5.43
50-59 分 104 1.58 7.01
60-69 分 136 2.06 9.07
70-79 分 206 3.13 12.20
80-89 分 293 4.44 16.64
90-99 分 470 7.13 23.77
100-109分 901 13.67 37.44
110-119分 1169 17.73 55.17
120-129分 1376 20.87 76.05
130-139分 1258 19.08 95.13
140-149分 314 4.76 99.89
150 分 7 0.11 100.00
Total 6592 100
150分140-149分
130-139分
120-129分
110-119分
100-109分
90-99分80-89分70-79分60-69分50-59分0-49分
数分数段
25.0%
20.0%
15.0%
10.0%
5.0%
0.0%
Perce
nt
初三 高三
07 年初三外语总分分数段分数段 频数 百分率 累极百分率0-49 分 373 5.66 5.66
50-59 分 190 2.88 8.54
60-69 分 215 3.26 11.80
70-79 分 253 3.84 15.64
80-89 分 326 4.95 20.59
90-99 分 358 5.43 26.02
100-109分 539 8.18 34.19
110-119分 755 11.45 45.65
120-129分 1200 18.20 63.85
130-139分 1623 24.62 88.47
140-149分 759 11.51 99.98
150 分 1 0.02 100.00
Total 6592 100
高三外语分数段 人数 百分率 累计百分率0-49 309.00 5.02 5.02
50-59 185.00 3.01 8.03
60-69 278.00 4.52 12.55
70-79 514.00 8.36 20.91
80-89 695.00 11.30 32.21
90-99 879.00 14.29 46.50
100-109
986.00 16.03 62.53
110-119
1087.00
17.67 80.20
120-129
897.00 14.58 94.78
130-139
312.00 5.07 99.85
140-150
9.00 0.15 100
Total6151.0
0 100.00
选拔为目的1. 确定选拔的分数范围
例 1: 初三能进入普高约为全体考生的60%语文总分百分位表中 60% 处的分数为 125分 2. 作频数分布表和图
作语文总分在 125 分以上 每隔 2-3 分的频数分布表和图
3. 观察各分数段的人数和百分率 能否达到选拔的要求
初三语文在 115 分以上分数段 人数 百分率 累计百分率
0-114 3777 57.30 57.30
115-116 490 7.43 64.73
117-118 460 6.98 71.71
119-120 474 7.19 78.90
121-122 383 5.81 84.71
123-124 343 5.20 89.91
125-126 250 3.79 93.70
117-128 175 2.65 96.36
129-130 116 1.76 98.12
139-141 63 0.96 99.07
131-132 40 0.61 99.68
133-134 13 0.20 99.88
135-136 6 0.09 99.97
137-138 1 0.02 99.98
145-146 1 0.02 100.00
Total 6592 100 100
例 2:高三我区能进入本科约为考生的 64% 语文百分位表在该处分数是 95分
作 95分以上的频数分布表和图语文 96 分以上分数段
人数 百分率 累计百分率
0-94243
640.69 40.69
95-96 436 7.28 47.98
97-98 454 7.58 55.56
99-100 470 7.85 63.41
101-102
468 7.82 71.23
103-104
480 8.02 79.25
105-106
381 6.36 85.62
107-108
280 4.68 90.29
109-110
191 3.19 93.48
111-112
139 2.32 95.81
语文 96 分以上分数段 人数 百分率 累计百分率113-114
104 1.74 97.54
115-116
72 1.20 98.75
117-118
32 0.53 99.28
119-120
28 0.47 99.75
121-122
4 0.07 99.82
123-124
4 0.07 99.88
125-126
3 0.05 99.93
127-128
2 0.03 99.97
129-130
1 0.02 99.98
131-132
1 0.02 100.00
Total 5986100.0
0
效 度一 . 内容效度
二 . 目标关联效度
三 . 结构效度
试卷与课程标准的符合情况
测试分数与能够体现测试目标的效标分数 之间的一致程度
对双向细目表进行分析
测试内容与预定要测的目标的一致性程度
测验分数在多大程度上测量或解释了某种理论构想
试卷各题得分与总分 的相关度作定量分析
初三 07年 1 月
语文
1语文 2
语文3
语文4
语文 5语文
6语文 7 语文总
语文总 Pearson Correlation
0.66 0.49 0.54 0.46 0.71 0.74 0.77 1
Sig. (2-tailed) 0 0 0 0 0 0 0 N 6592 6592 6592 6592 6592 6592 6592 6592
Pearson 相关系数越大其效度越高
初三 07年 1 月
数学1
数学 2数学3
数学4
数学 5
数学6
数学7
数学 8
数学9
数学10
数学11
数学总
数学总
Pearson Correlation
0.85 0.64 0.53 0.54 0.74 0.72 0.80 0.77 0.66 0.78 0.49 1
Sig. (2-tailed) 0 0 0 0 0 0 0 0 0 0 0
N 6579 6579 6579 6579657
96579 6579
6579
6579657
96579
6579
初三 07年 1 月
外语1
外语2
外语3
外语4
外语5
外语6
外语7
外语8
外语总
外语总
Pearson Correlation
0.91
0.89
0.89
0.81
0.86
0.94
0.90
0.88
1
Sig. (2-tailed) 0 0 0 0 0 0 0 0
N6586
6586
6586
6586
6586
6586
6586
6586
6586
07 模拟考语文 07 中考语文07 模拟考语文 Pearson 1 0.6995279
显著性(双侧) 0 N 5311 5311
07 模拟考数学 07 中考数学07 模拟考数学 Pearson 1 0.8501468
显著性(双侧) 0 N 5311 5311
07 模拟考英语 07 中考英语07 模拟考英语 Pearson 1 0.9021569
显著性(双侧) 0 N 5310 5309
某次测试与另一次测试的效度 ( 模拟考与中考 )
试题难度 =1 -实得分/满分初三07年1月
难度语 1 0.095
语 2 0.151
语 3 0.147
语 4 0.446
语 5 0.331
语 6 0.357
语 7 0.228
语总 0.265
语文难度
0. 000
0. 100
0. 200
0. 300
0. 400
0. 500
1语 2语 3语 4语 5语 6语 7语 语总
语文难度
初三07年1月 难度
数一 0.16
数二 0.22
数三17 0.06
数三18 0.10
数三19 0.15
数三20 0.10
数三21 0.29
数四22 0.18
数四23 0.43
数四24 0.36
数四25 0.88
数总难度 0.27
0. 000. 100. 200. 300. 400. 500. 600. 700. 800. 901. 00
初三07年1月 难度英Ⅰ-Ⅳ 0.18
英Ⅴ 0.23
英Ⅵ 0.28
英Ⅶ 0.21
英Ⅷ 0.19
英Ⅸ 0.20
英Ⅹ 0.47
英Ⅺ 0.26
英总难度 0.25
0. 000. 050. 100. 150. 200. 250. 300. 350. 400. 450. 50
试题的区分度
区分度 = 高分组得分率-低分组得分率
高分组 : 由总分的前 31% 的学生组成
低分组 : 由总分的后 31% 的学生组成
某试题的区分度 = 高分组学生在该题的平均得分率 -低分组学生在该题的平均得分率
试题的区分度 区分度 = 高分组得分率-低分组得分率
初三07年1月 区分度
数一( 1 ) 0.29
数二( 2 ) 0.31
数三17( 3 ) 0.17
数三18( 4 ) 0.26
数三19( 5 ) 0.48
数三20( 6 ) 0.32
数三21( 7 ) 0.64
数四22( 8 ) 0.49
数四23( 9 ) 0.83
数四24( 10 ) 0.69
数四25( 11 ) 0.30
0. 00
0. 20
0. 40
0. 60
0. 80
1. 00
1 2 3 4 5 6 7 8 9 10 11
数学区分度
区分度的评判标准区分度 评价0 . 40以上 非常良好0 . 30-0 . 39 良好
0 . 20-0 . 29 尚可
0 . 19以下 差区分度与难度的关系区分度 难度
0 1
0 .2 . 0.9
0.6 0.7
1 0.5
0.6 0.3
0.2 0.1
0 0
初三07年1月 区分度
数一 0.29
数二 0.31
数三17 0.17
数三18 0.26
数三19 0.48
数三20 0.32
数三21 0.64
数四22 0.49
数四23 0.83
数四24 0.69
数四25 0.30
初三07年1月 难度
数一 0.16
数二 0.22
数三17 0.06
数三18 0.1
数三19 0.15
数三20 0.1
数三21 0.29
数四22 0.18
数四23 0.43
数四24 0.36
数四25 0.88
信 度信度是指测试结果的准确程度或可信程度 ( 外在信度与内在信度 )
外在信度 : 不同时间进行测试时的一致程度 如 : 重测信度 : 求同一测验的两次测试的相关系数 一般要求信度系数在 0.7 以上
常用肯德尔和谐系数来分析
评分者的信度评分者信度 : 不同评分者对实际得分的影响
例 :有 A B C 三为教师给 6 篇作为评分N 1 2 3 4 5 6
A 25 30 27 20 28 32
B 22 26 21 20 25 30
C 15 20 18 14 21 22
将分数转换为等级N 1 2 3 4 5 6
A 5 2 4 6 3 1
B 4 2 5 6 3 1
C 5 3 4 6 2 1
Ri 14 7 13 18 8 3
肯德尔和谐系数=0 . 95
常用 Cronbach`s Alpha 来计算内在信度
例 : 初三英语 (07年 1月 )的 α 系数=0.934高三英语 (07年 1月 )的 α 系数=0.927
内在信度测试各题之间的内在一致性的程度
内在信度系数在 0.8 以上 , 表示其一致性程度高
α= n
n- 1(SD
2-∑ SD
2
i )SD2
N =测 验 题 的 数量 SD2= 测验分数的方差
∑SD2 =每道题方差之和
选择题项目的选答比率分析
题号 正确选项选项分布率(%)
A B C D 空1 A 92 0.97 3.57 3.64 -
2 D 1.21 2.512.2
984 -
3 C 0.57 6.5790.2
12.64 -
4 B 5.14 73.43 2.21 19.14 0.07
5 C 17.93 6.3671.2
94.21 0.21第 1题 :B 项迷惑性过弱
第 2题 :A 项迷惑性过弱
第 3题 :A 项迷惑性过弱
第 4、 5 题反应正常
试题特征曲线按总分得分由低分组到高分组 在该题的得分率做曲线例 :07年 1 月高三化学第 5、 7 题的特征曲线
5 7试题 与试题 的特征曲线
0. 00
0. 20
0. 40
0. 60
0. 80
1. 00
1 2 3 4 5 6 7 8 9 10
7试题 5试题
作试题特征曲线的方法1. 作该试卷总分的百分位表 按由低分到高分分成 10 组
2.统计上述 10 组学生在各试题的平均得分率编号 百分位 化 5 得分率 化 7 得分
率1 0-9% 0.05 0.03
2 10-19% 0.72 0.47
3 20-29% 0.74 0.55
4 30-39% 0.77 0.62
5 40-49% 0.78 0.67
6 50-59% 0.79 0.71
7 60-69% 0.81 0.77
8 70-79% 0.83 0.83
9 80-89% 0.83 0.88
10 90-100% 0.86 0.94 3. 作曲线图