採点者間のスコア不⼀致率（２段階以上の隔たりが出た回答の割合）TA+TD TA TD

2015年度

総数 6408 3204 3204不⼀致数 1263 727 536不⼀致率 19.7% 22.7% 16.7%

2016年度

総数 6444 3222 3222不⼀致数 1095 752 343不⼀致率 17.0% 23.3% 10.6%

2017年度

総数 7182 3591 3591不⼀致数 521 333 188不⼀致率 7.3% 9.3% 5.2%

0%

10%

20%

30%

2015年度 2016年度 2017年度

不⼀致率

TA+TD TA TD

◆信頼性の確保：採点の管理

14

問題なのは，どこで採点されているかではなく，構成概念が周知徹底され，信頼性が確保されているか。いずれにも⾦と時間，⾼度の専⾨知識と経験が必要だが，ブラックボックスの中で何が⾏われているかは外から⾒えない。

15

◆ トラブル防⽌とセキュリティー確保

16

◆確実な回答⾳声の回収