제2장평가도구의질판단기준

1. 타당도

20130239 초등교육과김희연

I. 타당도란?

II. 타당도의전통적관점

III.타당도의통합적관점

목차

I.타당도란

?

1. 타당도의정의

타당도(validity) :

검사도구의질을판단하는기준중평가의목적에비추어가장근본적인기준

실제검사도구가측정하고있는것이검사도구가측정하려고하는것과얼마나근접하는가?

1. 타당도의정의

타당도에관한 Question

Q. 이검사가실제무엇을재고있느냐?

Q. 이능력, 성질, 특성을어느정도로재고있느냐?

타당도는근본적으로 대한질문

I.타당도란

?

II.타당도의전통적관점

1. 전통적관점- 타당도의종류

• 예측타당도

• 공인타당도

2. 내용타당도

평가도구가그것이평가하려고하는내용(교육목표)을어느정도로충실히측정하고있는지를분석측정하려는것

정의

내용타당도의준거=교육목표

교육목표의세분화이원분류표작성

검사의타당성 ↑

II.타당도의전통적관점

2. 내용타당도

내용타당도를결정하는요인

-이평가도구가처음에의도했던교육목표에비추어보아적절한가

-문항내용이교과내용의중요한것을빠뜨리지않고충분히포괄하고있는가

-문항의난이도가학생집단의성질에비추어보아적절한가

-문항의표본이모집단을잘대표하고있는가

이러한내용타당도의추정은검사내용에대한전문가의판단에기초!

전문가의주관적판단에의해검사의타당성에대한판단이이루어지므로주관성이많이개입된다는단점이있다.

II.타당도의전통적관점

3. 준거타당도

하나의지표를사용하여측정한결과를다른기준지표를사용하여측정한결과와비교했을때나타난관련성의정도

=선행검사(점수)X와 준거(행동특성)Y와의상관계수

II.타당도의전통적관점

정의

예측타당도 공인타당도

기존의검사가미래의행동을얼마나잘반영하고있는지와관련

기존의타당도가검증된도구가현재의실제행동을얼마나잘반영하고있는가와관련

3. 준거타당도

행동의준거

미래 현재(동시에)

Ex)

입학성적이높은학생이입학후에도학업성적이높다면그입학시험의예측타당도는높다.

Ex)

교과흥미검사의결과가미술에흥미가있다고나타난다면학생은미술활동에적극적이어야한다.

VS

어떤평가도구가목적하는준거를정확히예언하는가

II.타당도의전통적관점

3. 준거타당도

예측타당도

장점 -미래의행위에대한예언을하기때문에선발, 채용, 배치등의목적으로사용가능

단점 -동시에측정불가-검증하기위해시간적여유가필요,

-다른원인으로인해준거가훼손되었을가능성도있음

공인타당도

장점 -평가도구의실제적의미를풍부히해주고활용하는데유용한정보를제공-새로운연구의아이디어를제공

단점 -기존검사가없을경우공인타당도를확인할수없음-기존검사에의존적인경향이있음

II.타당도의전통적관점

한검사가조작적으로정의되지않은어떤특성이나성질을측정하려고했을때, 검사가심리적특성을구성하고있는구인들을얼마나잘포함하였느냐의정도

4. 구인타당도

검사성취에반영되어있다고짐작되는인간의가정적속성Ex) 지배성, 자아개념, 사고력,

학습동기,성취동기, 불안등

아직조작적으로정의되지않고, 과학적으로이론이제대로정립되지않은새로운개념혹은구인을측정하는검사에과학적이론과타당화를부여하는과정

“이특성을가진사람은 X라는상황에서 Y의행동을보일것이다＂

검사자체보다도준거의확인과이론형성이중요!!

조작적으로정의되지않은구인의성질에관한법칙을정립하기위한과정이므로

II.타당도의전통적관점

정의

( )

검사점수혹은검사결과의원인이될구인이무엇

인지를시사하는과정

이구인에관련된이론의상정과이이론에서추리할수있

는가설을추출하는과정

이가설을검증하기위해경험적연구를실행하는과정

4. 구인타당도

*구인타당도를검증하기위한일반적절차

관찰및검사의이론적분석을기초로한상상적행위로이루어짐

과학의논리적조작에의존

*구인타당도를 밝히는과정에서는모든형태의연구방법이쓰인다!

이론을정립하기위해서는적절하다고생각되는모든방법이필요하기때문

따라서, 구인타당도의 정도를어떤단일한지수로표현할수X

II.타당도의전통적관점

타당도의통합적관점의바탕이됨

III.타당도의통합적관점

1. 통합적관점의의의

1970년대초, 학자들은한검사의타당도검증의대상은그검사자체가아

니라검사점수로부터유추되는해석과추론이라는것을인식

구인타당도에내재된원리를모든타당화의원리로확대함으로써타당화과정을과학적인이론검증의과정과동일시한다.

통합적관점은타당화과정에서가치와검사활용의결과를명시적으로고려한다.

타당도는관련된모든증거들을활용하여검사점수의해석에대해내린종합적이고평가적인판단이다.

타당화과정은사실상평가이다.

[타당도에대한통합합적관점의특성]

III.타당도의통합적관점

2. 타당도증거

(1) 검사내용에기초한증거

검사의내용영역의적절성이검사점수로부터추론되는특정한해석과연결된다

(2) 반응과정에기초한증거

측정하려는구인과수험자의반응과의적절성에관한것이다

(3) 내적구조에기초한증거

검사문항과검사구성요소간의관계가검사점수해석의기반이되는구인과일치하는정도를나타낸다

(4) 다른변수와의관계에기초한증거

검수점수와외재적인변수간의관련성이검사점수를해석하는데기반이되는구인과얼마나일관성을갖는지를분석한다

(5) 검사결과에기초한증거

의도하거나의도하지않은검사사용의결과를분석하는것이다

감사합니다^^