신뢰도 신뢰도 개념 (1)의미:어떤 검사 도구로 여러 번 측정을 하였을 경우, 개인의 검사 점수의 일관성 정도를 나타냄 *타당도: ‘무엇을’ 측정할 수 있는가의 문제 *신뢰도: ‘어떻게’ 측정하고 있느냐의 문제. 측정의 오차가 얼마나 적으냐에 관심 (2) 신뢰도의 특성 ① 신뢰도는 검사 도구 자체의 신뢰도를 가리키는 것이 아니라 그 도구에 의해 획득된 결과의 신뢰도를 가리킨다. ② 신뢰도 추정치는 언제나 특정한 유형의 일관성을 가리킨다. ③ 신뢰도는 통계적 개념이다. (일관성의 표현-신뢰도 계수, 측정의 표준오차 이용)
2. 신뢰도의 종류 신뢰도 종류 검사지 (도구) 실시횟수 상관계수 특징 재검사 신뢰도 1 2 안정성 계수 단점:검사의 간격 등의 여러 조건에 따라 신뢰도 계수가 변함 동형검사 동형성 장점: 재검사신뢰도의 시험간격 설정의 문제 (기억효과, 연습효과) 해결 단점: 동형검사 제작이 용이하지 않음 반분 신뢰도 (2개처럼반분) 동질성 장점: 한 번의 검사 실시로 신뢰도 추정 단점: 검사 양분법 따라 신뢰도 계수가 변함 Spearman-Brown 예언공식사용 문항내적 합치도 (문장 하나하나를 검사로 취급) Kuder-Richardson 신뢰도 : K-R 20, K-R 21 Cronbach의 α 계수 검사가 두 개 이상의 내용에 대한 하위검사로 구성되어 있을 때는 각 하위검사마다 α계수를 산출(급내상관)
3. 신뢰도에 영향을 주는 요인 (1) 시간의 안정성: 외적조건(기후, 분위기, 감독태도 등)과 내적조건(피로, 정신적 긴장, 최근 경험 등)이 달라지면 신뢰도에 영향. -두 검사 사이의 간격은 가능한 짧게 설정하는 것이 바람직하지만 너무 짧으면 기억, 연습의 효과 등으로 신뢰도 과대 추정할 가능성 있음 (2) 문항 표본의 적절성 : 한 검사에 담긴 문항은 문항 모집단을 대표할 수 있는 것이어야 한다. (3) 문항의 동질성 : 동질적인 문항으로 구성된 검사일수록 신뢰도 높아진다. (4) 집단의 특징 : 집단의 특정부분의 학생에게 만이 아닌 전체학생을 대상으로 해야 신뢰도 높아진다. 동질집단의 신뢰도 < 이질집단의 신뢰도 (5) 검사의 길이 : 문항 수 많을수록 신뢰도 높아진다. (이 때 검사시간은 충분해야 함) (6) 문항의 난이도 : 어렵고 쉬운 문항이 많은 것보다 중간 정도의 문항 난이도 갖는 문항이 많을수록, 피험자를 능력 따라 구분할 수 있는 문항변별력 있어야 신뢰도 높아진다.
4. 신뢰도와 타당도의 관계 *타당도: 측정하려는 것을 얼마나 정확하게 측정하고 있는가. 내용의 문제 *신뢰도: 측정 방법의 정확성과 관련 신뢰도는 타당도의 필요조건은 O, 충분조건은 X ∴ 타당성 있으면 항상 신뢰성도 있지만, 신뢰성 없으면 타당도 보장되지 않음.