서술형 평가 확대 한국교육과정평가원 김 소 영.

Presentation on theme: "서술형 평가 확대 한국교육과정평가원 김 소 영."— Presentation transcript:

1 서술형 평가 확대 한국교육과정평가원 김 소 영

2 목차 서술형 평가의 개념 창의력/인성 교육을 위한 서술형 문항의 장단점 서술형 문항의 제작 절차
서술형 문항의 제작 절차별 유의 사항 및 예시 서술형 문항 채점의 일반 원칙 서술형 문항 채점의 신뢰도 제고 방안 서술형 평가 채점자 훈련 방안 서술형 평가 예시 문항

3 정기고사에서 활용되는 문항 유형 서술형 평가의 개념 선택형(selection-type)
진위형(true-false form), 선다형(multiple-choice form), 배합형(matching form) 서답형(supply-type) 단답형(short-answer form), 완성형(completion form), 논술형(essay type)

4 서술형 문항이란? 서술형 평가의 개념 서답형 중 단답형과 완성형을 제외한 문항으로서
학생들로 하여금 주어진 문제에 대해 자신의 생각을 구성하고 이를 글로 표현하도록 하는 문항 유형 이를 통해 단편적인 지식의 암기를 지양하고 학생의 창의성, 문제해결력 등 고등정신능력을 함양하고자 함

5 서술형 문항의 장점 서술형 문항의 장단점 학생들이 문항이 지시하는 범위 내에서 자유로이 문제
를 깊게 또는 넓게 다룰 수 있고 자신의 생각을 자신의 말로 표현할 수 있는 점, 즉 반응의 자유가 있음 창의력, 표현력, 문제해결력과 같은 고등정신능력을 측정하는데 보다 효과적임 서술형 문항은 학생들의 학습 태도 개선에 효과적임

6 서술형 문항의 단점 서술형 문항의 장단점 서술형 문항의 가장 큰 단점은 채점 상의 어려움임.
서술형 문항은 채점에 시간과 노력이 많이 들며, 또한 채점자간 신뢰도를 확보하는 것이 어려움 서술형 문항은 선택형 문항에 비해 문항 표집 수가 제한 됨(문항 수가 줄어 듬). 이는 결과적으로 측정을 못하는 학습목표가 생기게 되고 나아가서는 검사의 타당도와 신뢰도의 문제를 가져올 수 있음

7 서술형 평가 확대 실시의 교육적 효과 서술형 문항의 장단점 서술형 평가를 확대함으로써 학생의 창의성, 문제해결
능력, 비판력 등 고등정신능력을 평가할 수 있게 되고 이는 21세기 지식정보화사회에 적합한 평가 방식이라고 할 수 있음 서술형 평가의 확대, 활성화를 통한 평가 방식의 변화는 교수 및 학습 방식의 바람직한 변화를 유도할 것으로 보임

8 서술형 문항의 제작 절차 서술형 문항의 제작 교육목표의 분석ㆍ조직ㆍ진술 ⇓ 평가 대상 목표의 확인 및 선정
평가목표 이원분류표 작성 문항 및 채점기준 초안 작성 문항 및 채점기준 검토 및 수정

9 교육목표의 분석ㆍ조직ㆍ진술 서술형 문항의 제작 교육활동을 통해 달성하려는 교육목표가 무엇인지를
분석하고 이를 위해 어떤 내용을 가르치고 있는가를 세 분화하는 작업이 이루어져야 함 교육목표 및 내용은 평가에 적합하게 가능한 한 구체적 으로 진술되어야 하며 이를 위해 목표의 “최저 성취기준” 을 제시하는 것이 필요함

10 교육목표의 분석ㆍ조직ㆍ진술 서술형 문항의 제작 “최저 성취기준”으로 표현되는 교육목표 및 내용은 각
교과의 차시별 목표라고도 볼 수 있음. 중간고사나 기말 고사 평가문항을 개발하고자 할 경우 정기고사의 시험 범위에 해당하는 모든 목표들을 세분화함 교육목표: 운동에너지에 영향을 미치는 요인을 안다. 상태변화와 열에너지의 관계를 알고 일상생활에 적용할 수 있다. 화성암의 생성원리와 그에 따른 특징을 안다.

11 평가 대상 목표의 확인 및 선정 서술형 문항의 제작 - 교육목표를 분석, 조직, 진술한 후에 평가할 대상 목표
- 교육목표를 분석, 조직, 진술한 후에 평가할 대상 목표 를 확인, 선정하는 것은 실제적으로 평가 도구 작성의 최초 단계이며 평가의 핵심이라 할 수 있음 - 정기고사에서의 서술형 평가는 총괄평가로서의 기능 을 가지므로 평가목표는 교육 내용 중 중요 부분을 표 집하여 선정함

12 평가 대상 목표의 확인 및 선정 서술형 문항의 제작 - 서술형 평가뿐만 아니라 선택형 문항에 대한 평가목표
도 교육 내용 중 중요 부분을 표집하여 선정함 - 서술형 평가의 취지에 맞도록 교육목표 중 암기에 의한 단순 지식과 관련 있는 평가목표는 피하고 창의성, 문제 해결력 등 고등정신능력과 관련 있는 목표를 평가목표 로 선정함

13 평가 대상 목표의 확인 및 선정 서술형 문항의 제작 - 창의성, 문제해결력 등 고등정신능력과 관련 있는 목표
를 평가목표로 선정하는 것과 더불어 수업시간에 실제 로 다루어진 교육목표(또는 교육내용)를 평가 대상 목표 로 선정해야 함. 평가목표: 상태변화와 열에너지의 관계를 알고 일상생활에 적용할 수 있다.

14 평가목표 이원분류표 작성 서술형 문항의 제작 - 평가목표를 선정한 후에는 출제하고자 하는 각 문항의
- 평가목표를 선정한 후에는 출제하고자 하는 각 문항의 측정 내용과 행동을 재확인 및 구체화하고 이를 위해 평가목표 이원분류표를 작성함 - 이원분류표에는 선택형 문항과 서술형 평가에 대해 각 문항의 측정 내용과 행동을 재확인하는 것이 바람직함

15 평가목표 이원분류표 작성 서술형 문항의 제작 - 행동 영역은 교과별로 차이가 있으며, 학생들이 학습
- 행동 영역은 교과별로 차이가 있으며, 학생들이 학습 내용을 배우고 나서 학생들이 갖게 되기를 원하는 능력 또는 심리적 속성임. 국가수준 학업성취도 평가의 행동 영역을 살펴보면 아래와 같음. 다른 교과도 교사가 행 동 영역을 교육과정에 비추어 구성해 볼 수 있음 - 서술형 문항은 고등정신능력을 측정하기 위한 것으로 가능한 한 분석, 활용, 추론, 문제해결 등 상위 수준의 행동요소를 측정하여야 함

16 서술형 문항의 제작 평가목표 이원분류표 작성 이원분류표란 검사를 제작하기 전에 출제자가 참고하는 표로서, 각 문항이 어떤 내용을 측정하는지를 밝히는 내용요소와 그 내용을 측정할 때 어느 단계의 인지능력 수준을 측정할 것인지를 나타내는 행동요소로 나누어 구성된 표임 행동 내용 지식 이해 적용 분석 종합 평가 문항 수 비율(%) 상태변화와 열에너지 1 100(%)

17 문항 및 채점기준 초안 작성 문항 및 채점기준 초안 작성 서술형 문항의 제작
- 문항의 초안은 이미 설정된 평가대상 목표의 도달 정도 를 파악해 낼 수 있는 문항으로 문항 카드에 기록함 - 서술형 문항의 문항 카드에는 문항 내용과 함께 이원분 류표의 내용, 행동 영역, 평가목표, 배점, 난이도, 예상 소 요 시간, 모범 답안, 채점 기준 등을 기록함 문항 및 채점기준 초안 작성

18 문항 및 채점기준 초안 작성 문항 및 채점기준 초안 작성 서술형 문항의 제작
- 학생들이 문항에 대해 적절히 응답하도록 문항이 묻고 자 하는 내용과 발문, 지문 등이 명확하여야 함 - 서술형 문항의 채점 객관성 및 공정성을 높이기 위해서 문항 제작 시 채점기준과 모범답안을 함께 작성함 - 채점기준은 명료해야 하며 학생들의 다양한 반응을 예 상하여 가능한 한 포괄적으로 작성함 문항 및 채점기준 초안 작성

19 문항 및 채점기준 검토 및 수정 문항 및 채점기준 검토 및 수정 서술형 문항의 제작
- 문항을 만든 교사 이외에 동료 교사와의 협의를 통한 검토 및 수정이 필수적임, 동료 교사가 문항을 직접 풀 어 보는 것도 효과적임, 이 과정을 통하여 문항 내용이 나, 발문, 지문 등이 명확한지를 확인할 수 있음 - 평가목표 및 내용, 행동 영역과의 부합성(수업시간에 다룬 교육목표를 중심으로 창의성 또는 고등사고능력을 측정함) 확인

20 문항 및 채점기준 검토 및 수정 문항 및 채점기준 검토 및 수정 서술형 문항의 제작
- 문항 내용의 명료성 확인: 문항이 의도하는 바가 전체 적으로 명확한지를 확인함. 문항을 구성하는 용어들의 의미를 생각하여 각각의 용어가 적절하게 사용되고 있 는지를 확인함 - 모범답안의 포괄성 확인: 제시된 모범답안 이외의 다른 모범답안이 있을 가능성을 확인함 - 채점기준의 타당성 확인: 부분점수나 전체적인 배점이 타당하게 이뤄졌는지를 확인함

21 서술형 문항 채점의 일반 원칙 서술형 문항 채점의 일반 원칙 서술형 평가의 채점
- 학생단위가 아닌 문항단위로 채점이 이루어져야 함. 이 는 채점기준이나 결과가 다른 문항에 영향을 주는 것을 극소화하기 위해서도 필요하며, 채점자의 내적 일관성 을 유지하게 하고 채점을 보다 신속하게 하는 데에도 도움을 줌 - 출제자가 채점에도 참여함

22 서술형 문항 채점의 일반 원칙 서술형 문항 채점의 일반 원칙 서술형 평가의 채점
- 채점시간을 집중적으로 관리함으로써 채점자간 및 채 점시간의 차에서 올 수 있는 오류를 줄여야 함 - 채점에서 생기는 문제를 효율적으로 해결하기 위해 가 능한 한 채점자들이 한 장소에 모여 채점하도록 함

23 서술형 문항 채점의 신뢰도 제고 방안 서술형 평가의 채점 서술형 문항 채점의 신뢰도 재고 방안
- 서술형 평가 채점의 일관성을 의미하는 개념으로 채점 자 내 신뢰도, 채점자간 신뢰도가 있음 - 채점기준을 사전에 명료히 함으로써 채점자 내 신뢰도, 채점자간 신뢰도를 높일 수 있음 - 예비채점을 통한 채점자의 훈련으로 채점자의 전문성을 높이 는 것이 중요함: 예비채점은 같은 학생의 답안지를 여러 명의 채점자가 동시에 채점하고 채점결과의 일치 불일치에 대해 논의하는 과정으로 채점자들 간의 채점의 신뢰도를 높이는데 효과적임

24 서술형 문항 채점의 신뢰도 제고 방안 서술형 문항 채점의 신뢰도 재고 방안 서술형 평가의 채점
- 채점자가 평정의 오류에 빠지지 않도록 유의하는 것이 필요함: 평정의 오류에는 평정이 중간 부분으로 지나치 게 몰리는 경향, 평정자가 가지고 있는 피험자에 대한 선입견이 작용해서 생기는 오류, 피험자가 앞 문항에서 높은 점수를 받았으면 연이어 다음 문항에서도 잘 했으 리라고 관대하게 평정하거나, 그 역의 방식으로 평정하 는 오류 등이 있음

25 서술형 평가 채점자의 훈련 방안 서술형 평가 채점자 훈련 방안 서술형 평가의 채점
목적 : 채점자들이 채점 기준에 대하여 깊이 있게 이해하여 객관적이고 신뢰로우며 타당한 채점 결과를 확보하기 위함 <채점자 훈련의 주요 단계> 1단계. 문항과 채점 기준 검토 ↓ 2단계. 연습채점 (표집된 학생 답안 채점) 3단계. 채점자간 채점결과 확인 및 불일치 결과에 대한 논의 4단계. 3단계 결과를 바탕으로 채점기준 수정

26 서술형 평가 채점자의 훈련 방안 서술형 평가의 채점 서술형 평가 채점자 훈련 방안 1단계 : 문항과 채점 기준 검토
- 해당 문항을 출제한 교사는 각 문항 및 채점 기준에 관해 상세히 설명함 - 해당 문항을 출제한 교사는 문항의 내용 및 출제 의도에 대해서도 설명함 - 해당 문항을 출제한 교사는 전체 학생 답안 중 10~30개의 표본을 선택하여 모든 채점자가 복사하여 배부함(연습채점 용 답안으로는 채점기준을 명확하게 적용할 수 있는 답안과 채점기준을 적용하기 어려운 답안을 고르게 선택함) - 각 채점자는 10~30개의 채점을 실시함 1단계 : 문항과 채점 기준 검토 2단계 : 연습채점(표집된 학생 답안 채점)

27 서술형 평가 채점자의 훈련 방안 서술형 평가 채점자 훈련 방안 서술형 평가의 채점 - 채점자의 채점 결과를 문항별로 확인함
- 채점자간 채점결과가 일치하지 않는 문항을 중심으로 채점기준 내용 및 적용 방안에 대해 논의함 - 문항 별로 채점기준 내용이 모호하거나 적용하기가 어려운 사항을 3단계에서 이뤄진 논의 를 바탕으로 수정함 3단계 : 채점자간 채점결과 확인 및 불일치 결과에 대한 논의 4단계 : 문항과 채점 기준 검토

28 국어 - 연수자료 p.52 사회 - 연수자료 p.58 수학 - 연수자료 p.63 과학 - 연수자료 p.13
서술형 문항 예시 국어 - 연수자료 p.52 사회 - 연수자료 p.58 수학 - 연수자료 p.63 과학 - 연수자료 p.13 영어 - 연수자료 p.68

29 수고하였습니다!!!!!