알기쉬운 사회복지조사방법론 제6장 실험조사설계 경북대학교 황성동 C

6장 실험조사설계 목 차 1. 실험조사설계의 기본 요소 2. 실험조사설계의 타당도 3. 실험조사설계의 유형 1

1. 실험조사설계의 기본 요소 인과관계 추론의 기준 1-1 실험조사설계란 독립변수와 종속변수에 인과관계를 증명하는 조사설계 6장 실험조사설계 1. 실험조사설계의 기본 요소 인과관계 추론의 기준 1-1 실험조사설계란 독립변수와 종속변수에 인과관계를 증명하는 조사설계 인과관계의 기준 (1) 공변성 : 두 변수가 함께 변화함을 보여 주는 것 (인과관계의 검증을 필요한 일차적인 요건) (2) 시간적 우선성 : 두 변수 간에 시간적으로 어떤 변수가 앞서고 어떤 변수가 뒤따른다는 것 (3) 외부 설명의 통제 : 변수 간의 인과성에 영향을 주는 제3의 변수를 통제 2

1. 실험조사설계의 기본 요소 실험조사설계의 요건 1-2 (1) 통제집단 : 종속변수가 독립변수에 의해 변화되었는지, 비교를 6장 실험조사설계 1. 실험조사설계의 기본 요소 실험조사설계의 요건 1-2 (1) 통제집단 : 종속변수가 독립변수에 의해 변화되었는지, 비교를 목적으로 하는 통제집단 확보 (2) 무작위 배정 : 실험집단과 통제집단이 동일해야 함. 무작위로 연구 대상자 배정 (3) 독립변수의 조작 : 실험집단은 개입을 하고 통제집단은 개입을 하지 않음 3

내적 타당도 2. 실험조사설계의 타당도 내적 타당도 internal validity 2-1 통제집단 무작위배정 원인과 결과의 6장 실험조사설계 2. 실험조사설계의 타당도 내적 타당도 internal validity 2-1 통제집단 무작위배정 내적 타당도 원인과 결과의 관계는? 인과관계를 설명하는 다른 요인이 있는가? 독립변수의 조작 4

2. 실험조사설계의 타당도 내적 타당도 internal validity 2-1 (1) 내적 타당도 : 인과성의 확인 6장 실험조사설계 2. 실험조사설계의 타당도 내적 타당도 internal validity 2-1 (1) 내적 타당도 : 인과성의 확인 “종속변수의 변화가 독립변수에 의해 일어난 것인가?” 5

2. 실험조사설계의 타당도 내적 타당도 internal validity 2-1 6장 실험조사설계 2. 실험조사설계의 타당도 내적 타당도 internal validity 2-1 (2) 내적 타당도에 영향을 주는 주요 위협 요인 ① 성숙 효과 : 조사기간 중 조사집단의 특성이 변화함으로써 종속변수 영향 ② 역사적 사건 : 조사자의 의도와 관계없이 일어난 사건으로 종속변수 영향 ③ 측정 효과 : 개입 전후에 측정을 반복할 때 사전검사가 사후검사에 영향 ④ 측정도구 효과 : 측정도구의 사용 등의 측정 절차와 관련하여 영향 ⑤ 대상자 선정 오류 : 실험집단과 통제집단이 서로 상이한 경우 ⑥ 통계적 회귀 : 극단적인 사례를 집단에 포함시킬 때 발생하는 오류 ⑦ 실험 도중 탈락 : 실험 대상자가 사후측정을 하기 전에 실험 도중 탈락 ⑧ 상호작용의 영향 : 내적 타당도의 위협 요소 간에 상호작용이 일어날 경우 6

2. 실험조사설계의 타당도 외적 타당도 external validity 2-2 (1) 외적 타당도에 영향을 주는 위협 요인 6장 실험조사설계 2. 실험조사설계의 타당도 외적 타당도 external validity 2-2 “실험조사 결과를 어느 정도 일반화할 수 있는가?” “다른 대상자 및 다른 상황에서도 동일한 결과가 가능한가?” (1) 외적 타당도에 영향을 주는 위협 요인 ① 측정의 반응 효과 : 사전측정의 영향으로 대상자를 민감하게 만들어 대상자가 모집단을 대표할 수 없는 경우로 만드는 경우 ② 참여자 선정과 연구 속성의 상호작용 : 조사 대상자를 무작위로 구하기 어려울 경우 ③ 실험세팅의 영향 : 일상적인 상황과 다른 환경에서 실험조사연구가 진행될 경우 ④ 다중치료의 효과 : 실험조사에서 개입이 여러 차례 있을 경우 7

3. 실험조사설계의 유형 □ 실험조사설계 (experimental design) 6장 실험조사설계 3. 실험조사설계의 유형 □ 실험조사설계 (experimental design) 실험적 개입 즉 독립변수의 조작으로 발생할 수 있는 변수 간의 인과관계를 규명하기 위한 조사설계 유형으로 순수실험조사설계, 유사실험조사설계, 전실험조사설계 8

3. 실험조사설계의 유형 순수실험조사설계 R O 1 × O 2 R O 3 O 4 3-1 6장 실험조사설계 3. 실험조사설계의 유형 순수실험조사설계 3-1  (1) 통제집단전후비교조사 (pretest-posttest control group design) - 고전적인 실험조사설계 R   O 1 × O 2 R   O 3  O 4 ex. 비행청소년의 분노 대처 프로그램의 효과 연구    (분노 표현 및 공격성 측정) 9

3. 실험조사설계의 유형 순수실험조사설계 R × O 1 R O 2 3-1 6장 실험조사설계 3. 실험조사설계의 유형 순수실험조사설계 3-1  (2) 통제집단후비교조사 (posttest-only control group design) - 사전검사의 영향을 배제하고자 할 때 - 사전검사가 용이하지 않을 때 R  × O 1 R   O 2 ex. 상담기관 확인전화의 예약취소율에 대한 효과 10

3. 실험조사설계의 유형 순수실험조사설계 R O 1 × O 2 R O 3 O 4 R × O 5 R O 6 3-1 6장 실험조사설계 3. 실험조사설계의 유형 순수실험조사설계 3-1  (3) 솔로몬 4집단비교조사 (Solomon four-group design) - 사전, 사후검사를 하면서도 사전검사를 영향을 통제하고자 할 때 R   O 1 × O 2 R   O 3  O 4 R   × O 5 R     O 6 ex. 영화 속에 투영된 여성에 대한 폭력의 영향으로 인한 여성들의 무력감 비교 연구 11

3. 실험조사설계의 유형 순수실험조사설계 3-1 < 특성 > 6장 실험조사설계 3. 실험조사설계의 유형 순수실험조사설계 3-1 < 특성 > ① 통제집단으로 측정, 역사적 사건, 성숙 효과, 측정도구, 통계적 회귀 통제 가능 ② 무작위 배정으로 대상자 선정 문제 통제 가능 ③ 대상자의 규모가 작을 때 무작위 배정을 배합과 통합해서 사용 가능 ④ 내적 타당도 위협 요소에 대한 통제가 가능하여 내적 타당도를 높일 수 있음 12

3. 실험조사설계의 유형 유사실험조사설계 O 1 × O 2 O 3 O 4 3-2 6장 실험조사설계 3. 실험조사설계의 유형 유사실험조사설계 3-2   (1) 비동일통제집단전후비교조사 (non-equivalent control group design) - 실천현장에서 가장 많이 활용되는 조사연구형태로 무작위배정이 가능하지 않을 때 O 1 × O 2 O 3  O 4 ex. 방과 후 프로그램 효과 연구 13

3. 실험조사설계의 유형 유사실험조사설계 O 1 O 2 O 3 × O 4 O 5 O 6 3-2 6장 실험조사설계 3. 실험조사설계의 유형 유사실험조사설계 3-2  (2) 시계열(시간연속)조사 (time-series design) - 통제집단을 구하기 어려울 때 - 역사적 사건, 측정 효과의 우려 - 동일 간격, 동일 횟수의 측정 필요 - 안정된 기초선을 위해서 최소 3회 이상의 충분한 관찰 필요 O 1 O 2 O 3 × O 4 O 5 O 6 ex. 휴대폰 사용 집중 단속 후 교통사고 발생건수 변화 조사 14

3. 실험조사설계의 유형 유사실험조사설계 O 1 O 2 O 3 × O 4 O 5 O 6 6장 실험조사설계 3. 실험조사설계의 유형 유사실험조사설계 3-2  (3) 복수시계열조사 (multiple time-series design) - 비동일통제집단전후비교조사의 확대형 - 통제집단으로 역사, 측정, 성숙 등을 해결 - 강력한 유사실험연구형태 O 1 O 2 O 3 × O 4 O 5 O 6 O 1 O 2 O 3 O 4 O 5 O 6 ex. 5일제 근무제 이후 두 직종 간의 생산성 비교 연구 15

3. 실험조사설계의 유형 유사실험조사설계 3-2 < 특성 > ① 순수실험조사설계의 대안 6장 실험조사설계 3. 실험조사설계의 유형 유사실험조사설계 3-2 < 특성 > ① 순수실험조사설계의 대안 ② 무작위 배정, 통제집단 활용이 용이하지 않아 내적 타당도는 낮지만 실험에 대한 통제가 비교적 적어 외적 타당도 확보 용이함 ③ 무작위 배정이 가능하지 않을 때, 참여자 선정과 성숙, 측정 및 역사적 사건 간의 상호작용이 위협 요소가 됨 16

3. 실험조사설계의 유형 전실험조사설계 O 1 × O 2 3-3 6장 실험조사설계 3. 실험조사설계의 유형 전실험조사설계 3-3  (1) 단일집단전후비교조사 (one-group pretest/posttest) - AB 조사와 유사함 - 종종 서비스 프로그램 효과의 평가에 활용 O 1 × O 2 ex. 수줍음 집단의 치료 효과 연구 17

6장 실험조사설계 3. 실험조사설계의 유형 전실험조사설계 3-3  (2) 단일집단후비교조사 (one-group posttest-only design) - 단일집단전후비교조사 유형에서 사전검사가 없는 경우 - 비교의 근거가 없어 개입의 효과를 단정하는 데 문제 있음 × O 1 ex. 반상회 실시 후 주민들의 소속감 비교 연구 18

3. 실험조사설계의 유형 전실험조사설계 × O 1 O 2 3-3 6장 실험조사설계 3. 실험조사설계의 유형 전실험조사설계 3-3  (3) 비동일집단후비교조사 (posttest only design with nonequivalent groups) - 단일집단전후비교조사보다 발전된 형태 - 통제집단이 사전검사의 역할을 하지만, 두 집단이 동일하지 않다는 것이 문제 × O 1 O 2 ex. 가정폭력보호센터 이용자 대 비이용자의 가정복귀율 비교 연구 19

3. 실험조사설계의 유형 전실험조사설계 3-3 < 특성 > 6장 실험조사설계 3. 실험조사설계의 유형 전실험조사설계 3-3 < 특성 > ① 실험조사의 속성(무작위배정, 통제집단)을 갖추지 못할 때 활용 ② 가장 낮은 수준의 실험조사 형태 ③ 다른 대안이 있다면 지양해야 할 조사설계 20