40
试试试试试 试试试试 试试

试卷与试题 分析方法 简介

Embed Size (px)

DESCRIPTION

试卷与试题 分析方法 简介. 试卷的编制. 1. 测试目标与命题. 2. 组织命题. 确定三种题目的比例(基础题、能力题、拓展题). 命题蓝图与双向细目表. 审题. 3. 组织阅卷. 4. 试卷评价. 试卷评价. 一 . 试卷质量. 二 . 试题质量. 试卷质量. 1. 考试目的(通过性、选拔性、两者兼有)适宜性分析. 定性 -- 覆盖面. 定量 — 分数段. 2. 试卷内容的有效性分析. 定性 --- 内容效度、结构效度. 定量 ---- 目标关联效度. 3. 试卷编排的合理性分析. 试题应由易到难. 试题质量. 1. 试题的区分度与难度. - PowerPoint PPT Presentation

Citation preview

试卷与试题分析方法

简介

试卷的编制

2. 组织命题确定三种题目的比例(基础题、能力题、拓展题)

命题蓝图与双向细目表

审题

3. 组织阅卷

4. 试卷评价

1. 测试目标与命题

一 . 试卷质量

二 . 试题质量

试卷评价

1. 考试目的(通过性、选拔性、两者兼有)适宜性分析

2. 试卷内容的有效性分析

3. 试卷编排的合理性分析

试卷质量

定量—分数段 定性 -- 覆盖面

定量 ---- 目标关联效度

试题应由易到难

定性 --- 内容效度、结构效度

试题质量1. 试题的区分度与难度

3. 选择题项目的选答比率分析

5. 答题的典型错例分析

2. 试题的信度与效度

4. 试题特征曲线

1. 考试目的(通过性、选拔性、两者兼有)适宜性分析

观察试卷总得分的分数段07 年初三语文总分分数段

分数段 频数 百分率 累极百分率0-49 34 0.52 0.52

50-59 17 0.26 0.77

60-69 43 0.65 1.43

70-79 97 1.47 2.90

80-89 263 3.99 6.89

90-99 658 9.98 16.87

100-109 1508 22.88 39.75

110-119 2342 35.53 75.27

120-129 1454 22.06 97.33

130-139 174 2.64 99.97

140-150 2 0.03 100.00

Total 6592 100  

高三语文分数段 人数 百分率 累计百分率0-49 172 2.80 2.80

50-59 15 0.24 3.04

60-69 68 1.11 4.15

70-79 296 4.81 8.96

80-89 100516.3

4 25.30

90-99 199932.5

0 57.80

100-109 201532.7

6 90.55

110-119 538 8.75 99.30

120-129 41 0.67 99.97

130-139 2 0.03 100.00

Total 6151100.00

100.00

初三 高三

初三 高三

高三数学分数段 人数 百分率 累计百分率0-49 388.00 6.31 6.31

50-59 174.00 2.83 9.14

60-69 251.00 4.08 13.22

70-79 398.00 6.47 19.69

80-89 528.00 8.58 28.27

90-99 715.00 11.62 39.90

100-109 954.00 15.51 55.41

110-1191104.0

0 17.95 73.35

120-129 918.00 14.92 88.28

130-139 490.00 7.97 96.24

140-150 231.00 3.76 100

Total6151.0

0 100.00 100.00

07 年初三数学总分分数段分数段 频数 百分率 累计百分率0-49 分 358 5.43 5.43

50-59 分 104 1.58 7.01

60-69 分 136 2.06 9.07

70-79 分 206 3.13 12.20

80-89 分 293 4.44 16.64

90-99 分 470 7.13 23.77

100-109分 901 13.67 37.44

110-119分 1169 17.73 55.17

120-129分 1376 20.87 76.05

130-139分 1258 19.08 95.13

140-149分 314 4.76 99.89

150 分 7 0.11 100.00

Total 6592 100  

150分140-149分

130-139分

120-129分

110-119分

100-109分

90-99分80-89分70-79分60-69分50-59分0-49分

数分数段

25.0%

20.0%

15.0%

10.0%

5.0%

0.0%

Perce

nt

初三 高三

初三 高三

07 年初三外语总分分数段分数段 频数 百分率 累极百分率0-49 分 373 5.66 5.66

50-59 分 190 2.88 8.54

60-69 分 215 3.26 11.80

70-79 分 253 3.84 15.64

80-89 分 326 4.95 20.59

90-99 分 358 5.43 26.02

100-109分 539 8.18 34.19

110-119分 755 11.45 45.65

120-129分 1200 18.20 63.85

130-139分 1623 24.62 88.47

140-149分 759 11.51 99.98

150 分 1 0.02 100.00

Total 6592 100  

高三外语分数段 人数 百分率 累计百分率0-49 309.00 5.02 5.02

50-59 185.00 3.01 8.03

60-69 278.00 4.52 12.55

70-79 514.00 8.36 20.91

80-89 695.00 11.30 32.21

90-99 879.00 14.29 46.50

100-109

986.00 16.03 62.53

110-119

1087.00

17.67 80.20

120-129

897.00 14.58 94.78

130-139

312.00 5.07 99.85

140-150

9.00 0.15 100

Total6151.0

0 100.00  

初三 高三

初三 高三

选拔为目的1. 确定选拔的分数范围

例 1: 初三能进入普高约为全体考生的60%语文总分百分位表中 60% 处的分数为 125分 2. 作频数分布表和图

作语文总分在 125 分以上 每隔 2-3 分的频数分布表和图

3. 观察各分数段的人数和百分率 能否达到选拔的要求

初三语文在 115 分以上分数段 人数 百分率 累计百分率

0-114 3777 57.30 57.30

115-116 490 7.43 64.73

117-118 460 6.98 71.71

119-120 474 7.19 78.90

121-122 383 5.81 84.71

123-124 343 5.20 89.91

125-126 250 3.79 93.70

117-128 175 2.65 96.36

129-130 116 1.76 98.12

139-141 63 0.96 99.07

131-132 40 0.61 99.68

133-134 13 0.20 99.88

135-136 6 0.09 99.97

137-138 1 0.02 99.98

145-146 1 0.02 100.00

Total 6592 100 100

初三

例 2:高三我区能进入本科约为考生的 64% 语文百分位表在该处分数是 95分

作 95分以上的频数分布表和图语文 96 分以上分数段

人数 百分率 累计百分率

0-94243

640.69 40.69

95-96 436 7.28 47.98

97-98 454 7.58 55.56

99-100 470 7.85 63.41

101-102

468 7.82 71.23

103-104

480 8.02 79.25

105-106

381 6.36 85.62

107-108

280 4.68 90.29

109-110

191 3.19 93.48

111-112

139 2.32 95.81

语文 96 分以上分数段 人数 百分率 累计百分率113-114

104 1.74 97.54

115-116

72 1.20 98.75

117-118

32 0.53 99.28

119-120

28 0.47 99.75

121-122

4 0.07 99.82

123-124

4 0.07 99.88

125-126

3 0.05 99.93

127-128

2 0.03 99.97

129-130

1 0.02 99.98

131-132

1 0.02 100.00

Total 5986100.0

0  

高三

效 度一 . 内容效度

二 . 目标关联效度

三 . 结构效度

试卷与课程标准的符合情况

测试分数与能够体现测试目标的效标分数 之间的一致程度

对双向细目表进行分析

测试内容与预定要测的目标的一致性程度

测验分数在多大程度上测量或解释了某种理论构想

试卷各题得分与总分 的相关度作定量分析

初三 07年 1 月

语文

1语文 2

语文3

语文4

语文 5语文

6语文 7 语文总

语文总 Pearson Correlation

0.66 0.49 0.54 0.46 0.71 0.74 0.77 1

  Sig. (2-tailed) 0 0 0 0 0 0 0    N 6592 6592 6592 6592 6592 6592 6592 6592

Pearson 相关系数越大其效度越高

初三 07年 1 月

数学1

数学 2数学3

数学4

数学 5

数学6

数学7

数学 8

数学9

数学10

数学11

数学总

数学总

Pearson Correlation

0.85 0.64 0.53 0.54 0.74 0.72 0.80 0.77 0.66 0.78 0.49 1

  Sig. (2-tailed) 0 0 0 0 0 0 0 0 0 0 0  

  N 6579 6579 6579 6579657

96579 6579

6579

6579657

96579

6579

初三 07年 1 月

外语1

外语2

外语3

外语4

外语5

外语6

外语7

外语8

外语总

外语总

Pearson Correlation

0.91

0.89

0.89

0.81

0.86

0.94

0.90

0.88

1

  Sig. (2-tailed) 0 0 0 0 0 0 0 0  

  N6586

6586

6586

6586

6586

6586

6586

6586

6586

07 模拟考语文 07 中考语文07 模拟考语文 Pearson 1 0.6995279

  显著性(双侧)   0  N 5311 5311

07 模拟考数学 07 中考数学07 模拟考数学 Pearson 1 0.8501468

  显著性(双侧)   0  N 5311 5311

07 模拟考英语 07 中考英语07 模拟考英语 Pearson 1 0.9021569

  显著性(双侧)   0  N 5310 5309

某次测试与另一次测试的效度 ( 模拟考与中考 )

试题难度 =1 -实得分/满分初三07年1月

难度语 1 0.095

语 2 0.151

语 3 0.147

语 4 0.446

语 5 0.331

语 6 0.357

语 7 0.228

语总 0.265

语文难度

0. 000

0. 100

0. 200

0. 300

0. 400

0. 500

1语 2语 3语 4语 5语 6语 7语 语总

语文难度

初三07年1月 难度

数一 0.16

数二 0.22

数三17 0.06

数三18 0.10

数三19 0.15

数三20  0.10

数三21 0.29

数四22 0.18

数四23 0.43

数四24 0.36

数四25 0.88

数总难度 0.27

0. 000. 100. 200. 300. 400. 500. 600. 700. 800. 901. 00

初三07年1月 难度英Ⅰ-Ⅳ 0.18

英Ⅴ 0.23

英Ⅵ 0.28

英Ⅶ 0.21

英Ⅷ 0.19

英Ⅸ 0.20

英Ⅹ 0.47

英Ⅺ 0.26

英总难度 0.25

0. 000. 050. 100. 150. 200. 250. 300. 350. 400. 450. 50

试题的区分度

区分度 = 高分组得分率-低分组得分率

高分组 : 由总分的前 31% 的学生组成

低分组 : 由总分的后 31% 的学生组成

某试题的区分度 = 高分组学生在该题的平均得分率 -低分组学生在该题的平均得分率

试题的区分度 区分度 = 高分组得分率-低分组得分率

初三07年1月  区分度

数一( 1 ) 0.29

数二( 2 ) 0.31

数三17( 3 ) 0.17

数三18( 4 ) 0.26

数三19( 5 ) 0.48

数三20( 6 )  0.32

数三21( 7 ) 0.64

数四22( 8 ) 0.49

数四23( 9 ) 0.83

数四24( 10 ) 0.69

数四25( 11 ) 0.30

0. 00

0. 20

0. 40

0. 60

0. 80

1. 00

1 2 3 4 5 6 7 8 9 10 11

数学区分度

区分度的评判标准区分度 评价0 . 40以上 非常良好0 . 30-0 . 39 良好

0 . 20-0 . 29 尚可

0 . 19以下 差区分度与难度的关系区分度 难度

0 1

0 .2 . 0.9

0.6 0.7

1 0.5

0.6 0.3

0.2 0.1

0 0

初三07年1月  区分度

数一 0.29

数二 0.31

数三17 0.17

数三18 0.26

数三19 0.48

数三20  0.32

数三21 0.64

数四22 0.49

数四23 0.83

数四24 0.69

数四25 0.30

初三07年1月 难度

数一 0.16

数二 0.22

数三17 0.06

数三18 0.1

数三19 0.15

数三20  0.1

数三21 0.29

数四22 0.18

数四23 0.43

数四24 0.36

数四25 0.88

信 度信度是指测试结果的准确程度或可信程度 ( 外在信度与内在信度 )

外在信度 : 不同时间进行测试时的一致程度 如 : 重测信度 : 求同一测验的两次测试的相关系数 一般要求信度系数在 0.7 以上

常用肯德尔和谐系数来分析

评分者的信度评分者信度 : 不同评分者对实际得分的影响

例 :有 A B C 三为教师给 6 篇作为评分N 1 2 3 4 5 6

A 25 30 27 20 28 32

B 22 26 21 20 25 30

C 15 20 18 14 21 22

将分数转换为等级N 1 2 3 4 5 6

A 5 2 4 6 3 1

B 4 2 5 6 3 1

C 5 3 4 6 2 1

Ri 14 7 13 18 8 3

肯德尔和谐系数=0 . 95

常用 Cronbach`s Alpha 来计算内在信度

例 : 初三英语 (07年 1月 )的 α 系数=0.934高三英语 (07年 1月 )的 α 系数=0.927

内在信度测试各题之间的内在一致性的程度

内在信度系数在 0.8 以上 , 表示其一致性程度高

α= n

n- 1(SD

2-∑ SD

2

i )SD2

N =测 验 题 的 数量 SD2= 测验分数的方差

∑SD2 =每道题方差之和

信度和效度的关系信度是效度的必要条件 , 效度高,信度一定高; 但信度高 , 效度不一定高 在数值上效度不会大于信度的平方根

效度最大值=√信度

选择题项目的选答比率分析

题号 正确选项选项分布率(%)

A B C D 空1 A 92 0.97 3.57 3.64 -

2 D 1.21 2.512.2

984 -

3 C 0.57 6.5790.2

12.64 -

4 B 5.14 73.43 2.21 19.14 0.07

5 C 17.93 6.3671.2

94.21 0.21第 1题 :B 项迷惑性过弱

第 2题 :A 项迷惑性过弱

第 3题 :A 项迷惑性过弱

第 4、 5 题反应正常

试题特征曲线按总分得分由低分组到高分组 在该题的得分率做曲线例 :07年 1 月高三化学第 5、 7 题的特征曲线

5 7试题 与试题 的特征曲线

0. 00

0. 20

0. 40

0. 60

0. 80

1. 00

1 2 3 4 5 6 7 8 9 10

7试题 5试题

1, 6初三语文题 题 的特征曲线

0. 00

0. 20

0. 40

0. 60

0. 80

1. 00

1 2 3 4 5 6 7

1题 6题

作试题特征曲线的方法1. 作该试卷总分的百分位表 按由低分到高分分成 10 组

2.统计上述 10 组学生在各试题的平均得分率编号 百分位 化 5 得分率 化 7 得分

率1 0-9% 0.05 0.03

2 10-19% 0.72 0.47

3 20-29% 0.74 0.55

4 30-39% 0.77 0.62

5 40-49% 0.78 0.67

6 50-59% 0.79 0.71

7 60-69% 0.81 0.77

8 70-79% 0.83 0.83

9 80-89% 0.83 0.88

10 90-100% 0.86 0.94 3. 作曲线图

偏度 : 指分布不对称的方向和程度 > 0 分布为右偏或正偏 < 0 分布为左偏或负偏

峰值:分布形态徒缓程度 分布图形尖销或峰突程度 > 0 高峰度,比较尖 < 0 低峰度,比较平坦

谢 谢