43
高高高高高高高高高 高高高高高 高高高高高 Sieh-Hwa Lin, Ph.D.

高中職學生學習資料 管理與分析

  • Upload
    brick

  • View
    65

  • Download
    3

Embed Size (px)

DESCRIPTION

高中職學生學習資料 管理與分析. 實務與概念. Sieh-Hwa Lin, Ph.D. 學習檔案放雲端 家長一指掌握. 2012.07.27 人間福報 : 台北市教育局率先建置數位化國中生學習檔案系統,把每個國中生出缺席狀況、獎懲紀錄、社團、服務學習、學習評量、心測結果全放到「雲端」,讓家長隨時了解孩子的學習狀況。教育局首創將輔導紀錄 e 化 ( 雲端化 ) ,預計 2012.09 起,台北市 85 所公私立國中全部採用。 民生國中 5 月起,每年編列二百萬元經費,讓台北市所有國中全部改用數位化的生涯輔導紀錄,並稱為「學生生涯領航儀表板」,已經有其他縣市考慮跟進。. - PowerPoint PPT Presentation

Citation preview

Page 1: 高中職學生學習資料 管理與分析

高中職學生學習資料管理與分析

實務與概念

Sieh-Hwa Lin, Ph.D.

Page 2: 高中職學生學習資料 管理與分析

學習檔案放雲端 家長一指掌握• 2012.07.27 人間福報 : 台北市教育局率先建置數位

化國中生學習檔案系統,把每個國中生出缺席狀況、獎懲紀錄、社團、服務學習、學習評量、心測結果全放到「雲端」,讓家長隨時了解孩子的學習狀況。教育局首創將輔導紀錄 e 化 ( 雲端化 ) ,預計2012.09 起,台北市 85 所公私立國中全部採用。

• 民生國中 5 月起,每年編列二百萬元經費,讓台北市所有國中全部改用數位化的生涯輔導紀錄,並稱為「學生生涯領航儀表板」,已經有其他縣市考慮跟進。

Page 3: 高中職學生學習資料 管理與分析

學習檔案放雲端 家長一指掌握• 台北市教育局表示,學生生涯領航儀表板將所有

的成績、社團、性向與興趣測驗全部納入,會給家長一組帳號密碼,讓家長可以注意孩子有哪些指標落後,可盡早安排加強的課程。

• 十二年國教上路後,國中生的生涯輔導非常關鍵,但目前紙本形式相當不便,改用數位化後,方便家長掌握孩子在學校的發展;如果是家中缺少電腦或上網設備的弱勢家庭,則由學校協助,印製成簡易版本來因應,或協助家長查詢。

Page 4: 高中職學生學習資料 管理與分析

個體資料呈現功能特性

群體資料展現 學校特色

學生學習資料管理與分析系統架構

• 全校性• 類科性• 全校性• 類科性

• 學生學習檔案資料• 學生學習診斷資料• 學生學習檔案資料• 學生學習診斷資料

群體 個體

Page 5: 高中職學生學習資料 管理與分析

高中職學生學習資料現況• 學生在校學習表現之質性與量性資料 ( 具延續性、

形成性 )• 學生學習資料表• 標準化成就測驗資料• 基測成績或教育會考成績等級資料 ( 具標準參照 )• 學生學習成就評量標準• 全民英檢、大考英語聽力• 國內與國際評比 -TASA 、 PISA 、 PIRLS 、 TIMSS• 各科試題分析資料 ( 學科中心 )• 課綱、課程教材資料 ( 高中職與國中小之課程差距 )

Page 6: 高中職學生學習資料 管理與分析

個體資料呈現功能特性

群體資料展現 學校特色

學生學習資料管理與分析系統架構

• 全校性• 類科性• 全校性• 類科性

• 學生學習檔案資料• 學生學習診斷資料• 學生學習檔案資料• 學生學習診斷資料

群體 個體

Page 7: 高中職學生學習資料 管理與分析

學校

全校性

整體性每年度學習表現

類科性

各類科每年度升學表現

個體 個體 個體

群 體

Page 8: 高中職學生學習資料 管理與分析
Page 9: 高中職學生學習資料 管理與分析
Page 10: 高中職學生學習資料 管理與分析

個體資料呈現功能特性

群體資料展現 學校特色

學生學習資料管理與分析系統架構

• 全校性• 類科性• 全校性• 類科性

• 學生學習檔案資料• 學生學習診斷資料• 學生學習檔案資料• 學生學習診斷資料

群體 個體

Page 11: 高中職學生學習資料 管理與分析

學生學習檔案

學習診斷標準化測驗資料

實作評量表現資料

學習診斷資料段考成績

資料

個 體

Page 12: 高中職學生學習資料 管理與分析

雲端學習檔案平台 ( 桃園縣教育局 ) http://kcity.e-portfolio.org.tw/

Page 13: 高中職學生學習資料 管理與分析

雲端學習檔案平台 ( 桃園縣教育局 ) http://kcity.e-portfolio.org.tw/

Page 14: 高中職學生學習資料 管理與分析

個體資料呈現功能特性

群體資料展現 學校特色

學生學習資料管理與分析系統架構

• 全校性• 類科性• 全校性• 類科性

• 學生學習檔案資料• 學生學習診斷資料• 學生學習檔案資料• 學生學習診斷資料

群體 個體

Page 15: 高中職學生學習資料 管理與分析

學生學習診斷之策略

第二層級對象 35*

第三層級對象 5

第一層級對象 70*

快篩快篩

交互檢證交互檢證

專業診斷專業診斷

Page 16: 高中職學生學習資料 管理與分析

學生學習診斷之策略

第二層級對象 35*

第三層級對象 5

第一層級對象 70*

快篩快篩

交互檢證交互檢證

專業診斷專業診斷

Page 17: 高中職學生學習資料 管理與分析

快篩 - 檢核工具 ( 基測國文科 70)基測國文科成績的快篩標準 (70%)

年 答對題數 量尺分數90 38 39

91 40 38

92 40 39

93 40 39

94 40 40

95 39 38

96 39 40

97 40 40

98a 39 63

99b 40 64

100c 39.7 63-64

101d 41 65

Page 18: 高中職學生學習資料 管理與分析

快篩 - 檢核工具 ( 基測國文科 35)基測國文科成績的快篩標準 (35%)

年 答對題數 量尺分數90 28 25

91 28 24

92 30 25

93 29 24

94 29 25

95 29 24

96 28 25

97 29 24

98a 29 44

99b 29 43

100c 30 45

101d 31 44

Page 19: 高中職學生學習資料 管理與分析

快篩 - 檢核工具 ( 基測英語科 70)基測英語成績的快篩標準 (70%)

年 答對題數 量尺分數90 38 43

91 32 39

92 40 45

93 40 45

94 40 44

95 41 46

96 42 48

97 42 48

98a 40 71

99b 41 72

100c 39 70

101d 40 71

Page 20: 高中職學生學習資料 管理與分析

快篩 - 檢核工具 ( 基測英語科 35)基測英語科成績的快篩標準 (35%)

年 答對題數 量尺分數90 17 16

91 15 20

92 18 16

93 18 16

94 19 16

95 21 16

96 22 16

97 24 17

98a 21 36

99b 22 35

100c 19 35

101d 22 36

Page 21: 高中職學生學習資料 管理與分析

快篩 - 檢核工具 ( 基測數學科 70)基測數學科成績的快篩標準 (70%)

年 答對題數 量尺分數90 23 36

91 21 37

92 26 42

93 26 41

94 28 42

95 25 38

96 27 40

97 28 41

98a 27 64

99b 28 65

100c 28 66

101d 29 67

Page 22: 高中職學生學習資料 管理與分析

快篩 - 檢核工具 ( 基測數學科 35)基測數學科成績的快篩標準 (35%)

年 答對題數 量尺分數90 15 24

91 12 24

92 16 21

93 14 20

94 18 23

95 17 24

96 16 21

97 19 24

98a 17 42

99b 18 41

100c 16 39

101d 19 40

Page 23: 高中職學生學習資料 管理與分析

第一層級、第二層級快篩標準

第一層級、第二層級快篩標準之量尺分數

科目 第一層級量尺分數 第二層級量尺分數

國文 64(63-65) 44(43-45)

英語 71(70-72) 36(35-36)

數學 66(64-67) 40(39-42)

Page 24: 高中職學生學習資料 管理與分析

學生學習診斷之策略

第二層級對象 35*

第三層級對象 5

第一層級對象 70*

快篩快篩

交互檢證交互檢證

專業診斷專業診斷

Page 25: 高中職學生學習資料 管理與分析

交互檢證工具 -對照表 ( 示例 )

學校常用工具學校常用工具 專業診斷工具專業診斷工具

基基測測或或教教育育會會考考

自自編編成成就就測測驗驗

快快篩篩工工具具

標標準準化化成成就就測測驗驗

標標準準化化學學習習診診斷斷

Page 26: 高中職學生學習資料 管理與分析

交互檢證工具 -對照表 ( 示例 )

學校常用工具學校常用工具 專業診斷工具專業診斷工具

基基測測或或教教育育會會考考

自自編編成成就就測測驗驗

快快篩篩工工具具

標標準準化化成成就就測測驗驗

標標準準化化學學習習診診斷斷

Page 27: 高中職學生學習資料 管理與分析

高中職標準化成就測驗1. 加州成就測驗第五版( California Achievement

Test, Fifth Edition, CATS)( CTB/McGraw-Hill; grades K-12)

2. 綜合基本能力測驗第四版( Comprehensive Test of Basic Skills, Fourth Edition, CTBS/4)( CTB/McGraw-Hill; grades K-12)

3. 愛荷華基本能力測驗, Form M ( Iowa Tests of Basic Skills, ITBS, Form M)( by H. D. Hoover, A. N. Hieronymus, D. A. Frisbie, & S. B. Dunbar; Riverside Publishing Co.; grades K-12)

Page 28: 高中職學生學習資料 管理與分析

高中職標準化成就測驗 ( 續 )

4. 愛荷華教育發展測驗, Form M ( Iowa Tests of Educational Development, ITED, Form M)( by L. S. Feldt, R. A. Forsyth, T. N. Ansley, & S. D. Alnot; Riverside Publishing Co., grades 9-12)

5. 卡夫曼教育成就測驗( Kaufman Test of Educational Achievement, KTEA/NU)( by A. S. Kaufman & N. L. Kaufman; American Guidance Services; grades 1-12)

6. 都會成就測驗第八版(Metropolitan Achievement Tests, Eighth Edition) (Metropolitan8)( Harcourt Brace; grades K-12)

Page 29: 高中職學生學習資料 管理與分析

高中職標準化成就測驗 ( 續 )

7. 畢保德個人成就測驗—修訂版 ( Peabody Individual Achievement Test-Revised, PIAT-R/NU)( by F. C. Markwardt, Jr.; American Guidance Service; ages 5-18)

8. 史丹佛成就測驗系列第九版( Stanford Achievement Test Series, Ninth Edition, Stanford 9)( Harcourt Brace; grades K-13)

9. 泰拉諾瓦測驗系列( TerraNova Assessment Series) ( CTB/McGraw-Hi11; ages K-12)

Page 30: 高中職學生學習資料 管理與分析

高中職標準化成就測驗 ( 續 )

10.魏克斯勒個人成就測驗 II ( Wechsler Individual Achievement Test Il, WIAT-II) ( The Psychological Corporation, ages 5-19 years)

11.廣泛成就測驗增訂版(Wide Range Achievement Test Expanded, WRAT-Expanded)( by G. J. Robertson; Wide Range; grades 2-12)

12.伍達克—強生 III 成就測驗(Woodcock-Johnson III Tests of Achievement, WJ-III)( by R. W. Woodcock, K. S. McGrew, & N. Mather; Riverside Publishing; 2-90+ years)

Page 31: 高中職學生學習資料 管理與分析

伍達克 - 強生成就測驗 III

1. 伍達克 - 強生成就測驗 III ( Woodcock-Johnson III Test of Achievement)的診斷功能更全面性,它是一種個別施測的多種技巧測驗組合,用來評估個人的一般智能、特定認知能力、口語能力、學業成就,適用於二到九十歲。

2. 組合性成就測驗應該是在整個測驗計劃中最先做的,因為它可以讓我們對受試者在不同科目的表現水準有概括的了解。如果受試者在某個特定科目需要更進一步的評估,可以實施單科測驗。最後,如果有必要更深入的了解受試者在閱讀或數學上有哪些不足,就需要實施診斷測驗以瞭解成因。

Page 32: 高中職學生學習資料 管理與分析

交互檢證工具 -對照表 ( 示例 )

學校常用工具學校常用工具 專業診斷工具專業診斷工具

基基測測或或教教育育會會考考

自自編編成成就就測測驗驗

快快篩篩工工具具

標標準準化化成成就就測測驗驗

標標準準化化學學習習診診斷斷

Page 33: 高中職學生學習資料 管理與分析

學生學習資料管理分析的瓶頸• 評量結果 ( 測驗分數 ) 的解釋取向

– 常模參照– 標準參照 *– 時間參照

• 評量結果 ( 測驗分數 ) 的可比性問題– 共同測驗或考試– 共同試題或作業 *

Kolen(2006), Holland and Dorans(2006), Marzano(2006, 2008)

Page 34: 高中職學生學習資料 管理與分析

測驗分數解釋的方法取向

• 常模參照 (學測、指考、基測、百分等級常模、標準分數常模 )

• 標準參照 (TASA 學習成就標準、 103年教育會考、國民中學學生學習成就評量標準 )

• 時間參照 (形成性評量 )

Page 35: 高中職學生學習資料 管理與分析

103 年教育會考成績計算

• 教育會考將採教育會考將採標準參照標準參照,透過測驗的,透過測驗的標準設定,各科評量結果將分為標準設定,各科評量結果將分為 33 等等級級– 「精熟」「精熟」– 「基礎」「基礎」– 「待加強」「待加強」

• 民國民國 103103 年數學科計分年數學科計分暫不包含非暫不包含非選擇題型成績選擇題型成績,英語科計分,英語科計分暫不包含暫不包含聽力測驗成績聽力測驗成績

• 寫作測驗的評分等級為一至六級分寫作測驗的評分等級為一至六級分

Page 36: 高中職學生學習資料 管理與分析

103103 年教育會考年教育會考各科目等級描述各科目等級描述

Page 37: 高中職學生學習資料 管理與分析

常模參照與標準參照的建置比較

常模參照

評量架構評量範圍整體描述

測驗工具+

分數量尺發展

取樣建置相對地位常模

分數解釋PR=92?PR=35?

解釋能力方向

標準參照

評量架構評量範圍

+內容標準表現標準描述

測驗工具+

分數量尺發展

標準設定根據

表現標準於分數量尺找切截分數或通過分數

分數解釋回歸表現標準內容標準

解釋能力內容

Page 38: 高中職學生學習資料 管理與分析

評量結果 ( 測驗分數 ) 可比示例

• 兩個班級、兩種段考試卷• 兩個班級 -甲班 (48 人、普通 ) 與乙班 (45

人、較優 )• 兩種段考試卷 (A 、 B 卷 )- A 卷 (20 題、較

易 ) 與 B 卷 (20 題、較難 )• 兩份試卷是同科考試,內容不一,但是其

中有 5 題是一樣的 ( 第 2,5,7,16,17 題 ).• 甲班做 A卷,乙班做 B卷

Page 39: 高中職學生學習資料 管理與分析

題號 A 卷等化前難度 B 卷等化前難度 B 卷難度等化到A 卷

甲班普通,乙班較優。 A卷較易, B卷較難。

?-1.2572173

??

1.3084202?

2.0783369????????

1.21742260.2426768

???

?-1.2572173

??

1.3084202?

2.0783369????????

1.21742260.2426768

???

Page 40: 高中職學生學習資料 管理與分析

題號 A 卷等化前難度 B 卷等化前難度

甲班普通,乙班較優。 A卷較易, B卷較難。

Page 41: 高中職學生學習資料 管理與分析

甲班做 A 卷等化前 乙班做 B 卷等化前 乙班做 B 卷等化到 A卷

甲班普通,乙班較優。 A卷較易, B卷較難。

Page 42: 高中職學生學習資料 管理與分析

分析模式與軟體

• IRT 或 Rasch 分析模式• 軟體 :R & MiscPsycho• Pinnacle Plus System by Excelsior

Software (http://excelsiorsoftware.com)

Page 43: 高中職學生學習資料 管理與分析

THANKTHANK YOU!YOU!