THE PRACTICE OF SOCIAL RESEARCH

By M.J Hwang

고전적 실험.

실험에 적절한 주제

피험자의 선정. CHAPTER 9 실험과 실험법

다양한 실험설계.

대안적 실험상황.

실험에 적절한 주제

연구의 주제와 목적에 따라 다른 연구방법들보다 실험이 더 적절한 경우가 있다.

실험은 인과관계를 규명하는 데 초점을 두기 때문에 기술적 목적보다는 설명적 목적에 더 잘 맞는다.

실험은 비교적 제한적이고 잘 정의된 개념과 명제들을 가진 연구 프로젝트에 특별히 잘 맞는다.

신중하게 구성되고 표준화된 설문은 모든 응답자로부터 나온 것과 같은 형태의 자료를 제공해 줌.

실험에 적절한 주제

실험은 소집단 상호작용에 대한 연구에서도 자주 활용된다.

실험실에서의 실험, 월드와이드웹을 활용한 실험, 종종 자연상태에서의 실험 등.

신중하게 구성되고 표준화된 설문은 모든 응답자로부터 나온 것과 같은 형태의 자료를 제공해 줌.

고전적 실험

사전조사 사후조사

독립변수 종속변수

실험집단 통제집단

실험의 가장 보편적인 형태 3가지 구성요소

고전적 실험

독립변수 종속변수

실험집단 통제집단

사전조사 사후조사

본질적으로 실험은 종속변수에 대한 독립변수의 영향 고찰 •독립변수는 전형적으로 실험자극의 형태를 취하며, 이 자극은 있거나 또는 없을 수 있음. •결국, 독립변수는 원인이고, 종속변수는 결과이다. * 독립변수와 종속변수는 실험이 시작되기 전에 조작적으로 정의한다. * 때로는 자료수집과정에서 다양한 관찰을 먼저 하고, 분석과정에서 변수들에 대한 가장 유용한 조작적 정의를 결정하는 것이 더 적절할 수 있음.

고전적 실험

사전조사 사후조사

독립변수 종속변수

실험집단 통제집단

가장 단순한 실험설계: 종속변수를 일단 측정(사전조사, pretesting)->자극에 노출(독립변수)-> 종속변수 측정(사후조사, posttesting). * 실천적인 문제로는 첫째, 피험자들은 실험조작(독립변수)에 의해 변하지 않았을 때조차도 사후조사에 다르게 응답할 수 있다. 실험조작에 응하는 동안 피험자가 연구목적을 알아채지 못했으나 사후조사에서 알아챌 수도 있다. 또한 어떤 현상을 연구한다는 행위자체가 연구결과를 변화시킬 수 있다. → So, 대처하는 하나의 방법으로 통제 집단을 사용한다.

고전적 실험

실험집단 통제집단

사전조사 사후조사

독립변수 종속변수

-실험집단: 실험에서 실험자극을 받는 피험자 집단 * 통제집단: 실험에서 실험자극을 받지 않은 피험자 집단으로, 이 점을 제외하고는 모든 점에서 실험집단과 유사하다. * → 실험이 끝날 무렵 통제집단과 실험집단을 비교하여 실험자극의 효과를 분석한다. •통제집단이 적절 하지 않아 발생한 호손 효과(Hawthrone effect) * 의학연구 - 실험처치 때문인지 아니면 실험 그 자체 때문인지 불분명. 따라서 의학자들은 종종 통제집단에 위약(placebo)을 준다. 신약이 효과가 있다면 실제 약을 먹은 사람들이 위약을 먹은 사람들보다 더 많이 좋아져야 함 * 실험실 밖에서 일어나는 사건의 효과도 통제해야 한다.

고전적 실험

이중눈가림 실험

이중눈가림 실험(double-blind experiment) 실험자와 피험자 모두 누가 실험집단이고 누가 통제집단인지 알지 못하도록 설계된 실험이다. (편견의 위험성 줄임) •어느 피험자가 어느 집단에 속하는지 알고 있는 연구자는 실험에 참여하지 않는다. •사회과학에서 완벽하게 정확하고 명료한 조작적 정의와 측정을 하는 것은 거의 불가능하다는 것이 이중눈가림 설계를 하는 것이 타당한지에 대한 또 다른 이유.

피험자의 선정

피험자의 선정

연구 중인 모집단의 모든 사람들을 포함하는 표집틀을 바탕으로 2개의 확률표본을 선정할 수 있다. 그러나 일반적으로 100명 이하의 확률표본은 그다지 대표적이지 못한데, 사회과학 실험에서 실험집단이건 통제집단이건 그렇게 피험자들이 많은 경우는 드물다. 따라서 대신 피험자들을 실험집단과 통제집단에 배정할 때 무작위화의 논리를 사용한다.

피험자들의 전체집단이 구성되고 나면, 실험자는 실험집단 혹은 통제집단에 이들 피험자들을 무작위적으로 배정해야 한다.

실험에서 피험자들을 하나 또는 그 이상의 변수에서 유사성에 근거하여 짝을 짓고 그들 중 한 사람은 실험집단에 다른 사람은 통제집단에 배정하는 과정. 1. 전반적인 짝 맞추기 과정은 가장 관련성이 높은 특성(ex> 인종, 연령, 성 등) 모두 모아 구성한 할당(quota) 매트릭스 활용 2. 실험설계가 요구하는 것보다 더 많은 수의 피험자들을 모집한 다음 최초 대규모 피험자 집단의 많은 특징을 검토 후 비슷한 피험자들의 쌍을 발견할 때마다 무작위적으로 한 명은 실험집단에, 다른 한 명은 통제집단에 배정한다.(이때 최초 집단에서 어느 누구와도 같지 않은 잠정적 피험자들은 실험에서 탈락) •어떤 변수들이 실험에 적절한지는 궁극적으로 해당 실험의 성격과 목적에 달려 있음

피험자의 선정

* 짝 맞추기 보다 무작위화를 선호 - 짝 맞추기 과정에서는 어떤 변수가 적절한지 미리 알 수 없는 경우가 더 많다. -실험결과를 분석하기 위해 사용되는 대부분의 통계기법은 무작위화를 전제로 하고 있다.

* 무작위화는 확률표집의 법칙이 적용될 수 있도록 비교적 큰 피험자 집단을 가지고 있을 때만 의미가 있다. 피험자들이 소수라면 짝 맞추기가 더 나을 것이다. * 때때로 짝 맞추기와 무작위화를 함께 쓰기도 한다. (층화표집의 절차를 이용)

피험자의 선정

다양한 실험설계

원시실험 연구설계 • 캠벨과 스탠리는 3가지 ‘원시실험 연구설계’ 소개 (실험설계의 과학적 기준을 충족시키지 못한다는 의미에서 원시적) •<p. 420. 그림 9-3 참조> ① 단일집단 사후조사, ② 단일집단 사전사후 조사 ③ 정적 집단 비교 (실험집단과 통제집단을 가지지만 사전조사는 하지 않는 방법)

다양한 실험설계

* 내적 비타당도(internal invalidity): 실험결과로부터 이끌어낸 결론이 실험에서 이루어진 것을 정확하게 반영하고 있지 않을 가능성을 의미한다. → 내적 비타당도는 실험자극 이외의 어떤 요인이 종속변수에 영향을 줄 수 있을 때 언제든지 존재한다. * 내적 비타당도를 유발하는 요인들 ① 역사(history) 실험결과에 영향을 줄 수 있는 역사적 사건 ② 성숙(maturation) 사람들이 지속적으로 성장하며 변화하는 것. ③ 조사(testing) 반복하여 조사하는 과정 ④ 측정도구(instrumentation) 사전조사와 사후조사 과정에서 개념화와 조작화 문제들 중 일부가 일어날 수 있다. ⑤ 통계적 회귀(statistical regression) 극단적인 점수로 시작한 피험자들에게 일어나는 변화를 실험자극으로 오해할 위험 ⑥ 선정오차(selection biases) 실험을 시작할 때 선정된 집단들이 서로 유사하지 않을 경우. ⑦ 피험자 사망(experimental mortality) 피험자들이 실험에 종료되기 전 탈락 ⑧ 인과적 시간순서(causal time order) 실험자극과 종속변수와의 시간적 순서가 불분명한 경우 실제 그 ‘역’으로 반박. ⑨ 처치의 확산 또는 모방(diffusion or limitation of treatment) 실험집단과 통제집단 피험자들 사이 대화 또는 자극의 일부전달 ⑩ 보상(compensation) 실험자가 통제집단 피험자에게 ‘배려’ 등 ⑪ 보상경쟁(compensatory rivalry) 실험자극이 주어지지 않은 피험자들이 더 노력해서 자극에 대한 보상 받으려는 시도 ⑫ 사기저하(demoralization) 통제집단이 박탈감을 느껴 자포자기.

다양한 실험설계

* 외적 비타당도의 원인 * 외적 비타당도 - 실험결과로부터 이끌어낸 결론을 ‘현실’세계로 일반화시킬 수 없을 가능성을 말한다. - 실험상황과 실험자극 간에 상호작용이 있다면 실험발견의 일반화 가능성을 위협받는다. -솔로몬의 4집단 설계 <p. 426. 그림 9-5참조>

대안적 실험상황

□ 인터넷상에서의 실험 □ ‘자연상태’에서의 실험 * 예) 허리케인이 마을 덮쳤다고 가정. 이후 일정 시간 지난 다음 재해 관련 설문. * 이 실험은 우리가 아주 집요하게 그렇게 하고자 해도 할 수 없는 것을 가능케 함. □ 실험방법의 장점과 단점 • 장점 - 인과적 추론을 가능하게 하는 독립변수의 격리, 실험 반복의 용이성, 그리고 과학적 엄격성 등에 있다. •약점 - 인위성에 있다. 즉 실험실에서 일어난 것이 바깥세상에서 일어나는 것을 반영하지 않을 수도 있다.