충남대학교 응용교육측정평가연구소. 목차 2. 문항 및 보충 학습ㆍ지도 자료 개발 3. 도달 기준점수 산출 4. 응시생 진단 결과 연계 지도 방안 ㆍ검사동등화 ㆍ수정된 Angoff 방법 ㆍ북마크 방법 1. 개발의 필요성 및 목적.

Presentation on theme: "충남대학교 응용교육측정평가연구소. 목차 2. 문항 및 보충 학습ㆍ지도 자료 개발 3. 도달 기준점수 산출 4. 응시생 진단 결과 연계 지도 방안 ㆍ검사동등화 ㆍ수정된 Angoff 방법 ㆍ북마크 방법 1. 개발의 필요성 및 목적."— Presentation transcript:

1 충남대학교 응용교육측정평가연구소

2 목차 2. 문항 및 보충 학습ㆍ지도 자료 개발 3. 도달 기준점수 산출 4. 응시생 진단 결과 연계 지도 방안 ㆍ검사동등화 ㆍ수정된 Angoff 방법 ㆍ북마크 방법 1. 개발의 필요성 및 목적

3 개발의 필요성 및 목적

4 상급 학년으로 올라갈수록 학생들의 누적적 학습결손 심화 학생들이 적시에 교육과정을 적절히 이수하고 있는지를 정확히 진단하고 보정 개인별 기초학력 수준을 구체적으로 파악하기 어려움 기초학력 미달 학생들의 수준에 적합한 자료로 지속적, 반복적 맞춤형 진단 보정 상급학년 부진 학생일수록 개인 학생의 부진 요소 파악 어려움 검사동등화, 기준설정 작업을 통해 기초학력 도달 기준 점수 산출 학생의 부진 출발점에 대한 정확한 진단을 통해 학습 지원 기초학력 도달 기준에 대한 동일한 척도 필요 동일한 학년임에도 불구하고 지역, 학교 등 소속 집단에 따른 기준점 적용

5

6 기초학력 진단-보정 시스템의 기관별 역할 - 표집학교 선정 및 시행 - 연구 개발진 선발과 지원 - 기초학력 향상도 검사 온라인 시범시행 결과 피드백 제공 시 ㆍ 도교육청 - 사업의 기본 방향 제시 - 시도교육청에 대한 행·재정적 지원 - 사업 진행상황 점검 교육부 - 기초학력 향상도 검사 온라인 시행 및 자료 활용, 피드백 단위 학교 - 기초학력 향상도 검사 온라인 시스템 구축, 활용 연수 한국교육학술정보원 - 검사동등화, 기준설정 - 문항 DB작업 - 성적산출 프로그램 개발 - 문항 개발, 늘품이 개발 - 표집시행 - 온라인 탑재 문항 및 늘품이 검토 응용교육측정평가연구소 6

7 기초학력 향상도 검사의 운영 흐름도

8 기초학력 진단-보정 시스템 개요

9

10 검사도구 다운로드 (http://basics.cbe.go.kr)

11

12

13

14

15 검사지, 내용분류표의 암호 해제 암호 : 03080308

16 구 분구 분내 용내 용 오프라인 시도교육청에 2 월 16 일 ( 화 ) 에 검사지와 보정자료 ( 늘품이 ) CD 제공함 - 인쇄하여 3 월 8 일 부터 사용 가능함 - 기준점수 확인 : 3 월 22 일 이후 공문을 통해 확인 온라인 시도교육청별 온라인 기초학력 진단 - 보정 시스템에 검사지 탑재함 - 3 월 8 일 이후 온라인 사용 가능함 - 기준점수 확인 : 3 월 24 일 이후 확인 가능함 ( 단, 초등학교 3R’s 의 경우는 온라인으로 시행하지 않음 ) 유의사항 기초학력 진단검사는 2 종 검사형 ( 진단, Z 형 ) 이 제공됨. 다만, Z 형은 동등화용 검사로서 진단 도구용으로 진단검사 문항과 기초학력 향상도 검사 문항의 조합으로 구성되어 있음. 따라서 새로 개발된 진단 도구용 (G 형 ) 검사의 활용을 권장함.

17 A B C …

18 문항 및 늘품이 개발의 절차 B 시리즈에서 세 문항을 포함할 수 있는 늘품이 차례 제목을 정함 → 네 자리 수까지의 덧셈과 뺄셈 ‣ 위와 같이 문항 매핑을 하고 유사한 평가요소별로 묶어서 학습내용 목차가 완성되면 교육과정 순서 ( 학습의 논리적 계열 ) 에 따라 내용 차례를 정함

19 기초학력 향상도 검사 문항과 늘품이 연계표 과목학년검사지 문항 번호 하위 영역 평가요소늘품이 자료명 영어중1중1A011 듣기 출신지 묻고 답하는 표현 이해하기 1. 자기 소개하기 영어중1중1A012 듣기 날씨를 묻고 답하는 표현 이해하기 2. 계절ㆍ날씨 묻고 답하기 영어중1중1A013 듣기 미래의 계획을 나타내는 표현 이해하기 3. 미래의 계획, 하고 싶은 일에 대해 말하기 영어중1중1A014 듣기 길을 안내하는 표현 이해하기 4. 길 묻고 답하기 영어중1중1A015 듣기 대화가 이루어지는 장소 파악하기 5. 장소 파악하기 영어중1중1A016 듣기 특정 날짜를 나타내는 표현 이해하기 6. 날짜ㆍ요일ㆍ특정일 묻고 답하기 영어중1중1A017 듣기 사물의 위치를 설명하는 표현 이해하기 7. 전치사 활용하기 ( 위치ㆍ시간 표현하기 ) 영어중1중1A018 듣기 원인을 말하는 표현 이해하기 8. 이유ㆍ의견 묻고 답하기, 되묻는 표현 익히기 영어중1중1A019 듣기 좋아하는 것을 묻고 답하는 표현 이해하기 9. 일반 동사의 활용ㆍ부정문ㆍ의문문 영어중1중1A0110 듣기 외모를 묘사하는 표현 이해하기 10. 외모 묘사하기

20 보충 학습ㆍ지도 자료 ‘늘품이’ 소개 ◎ 과목별 목차 - 향상도 검사 관련 문항 번호와 평가 요소 및 해당 쪽수로 구성 ◎ ｢늘품이｣ 카드 내용 - 향상도 시스템의 검사 문항을 아우르는 학습 요소로 구성 - 해당 검사형의 관련 문항 번호, [ 핵심콕콕 ], [ 실력다지기 ] 로 구성

21 보충 학습ㆍ지도 자료 늘품이 예시

22 온라인 탑재 보충 학습ㆍ지도 자료 늘품이

23

24 도달 기준점수 산출

25 검사동등화란? 검사동등화 검사간 난이도 차이를 통계적으로 조정하여 능력차이가 아닌 난이도 차이에 따라 기준에 도달/미도달 되지 않도록 함 검사간 난이도 차이를 통계적으로 조정하여 능력차이가 아닌 난이도 차이에 따라 기준에 도달/미도달 되지 않도록 함 서로 다른 검사에서 얻어진 점수라도 동등화 후에는 점수를 직접 비교 가능

26

27 수정된 Angoff 기준설정 방법 성취수준 및 기초학력 경계선 학생들의 개념 협의 1라운드 2라운드 3라운드 검사 영역 검토 후 기대 정답률 판정 전문가 협의, 기대 정답률 1 차 조정 전문가 협의, 기대 정답률 2 차 조정 문항별 분할 점수 산출

28 기준설정 결과 예시(사회) 1 라운드 2 라운드 3 라운드 Rater IDMean 기준 점수 Mean 기준 점수 Mean 기준 점수 R0160.218.156.517.055.716.7 R0252.015.636.310.945.313.6 R0356.717.059.717.959.317.8 R0457.017.154.216.354.216.3 R0567.320.253.516.152.815.9 R0644.813.553.316.053.216.0 R0747.314.262.718.860.318.1 R0858.517.646.514.049.214.8 R0954.016.252.215.755.316.6 R1059.317.848.214.549.314.8 R1126.07.845.513.747.814.4 R1241.512.554.016.254.016.2 R1355.216.655.016.554.016.2 R1452.815.955.816.855.716.7 R1553.516.151.315.451.715.5 Mean52.415.752.015.653.216.0 1 라운드 2 라운드 3 라운드 Rater IDMean 기준 점수 Mean 기준 점수 Mean 기준 점수 R0154.316.352.715.852.215.7 R0255.016.537.811.445.713.7 R0360.818.358.217.557.517.3 R0456.016.854.216.354.216.3 R0562.518.852.815.952.215.7 R0649.714.952.515.852.515.8 R0746.514.059.517.958.517.6 R0857.717.352.015.652.715.8 R0955.516.754.516.454.716.4 R1059.717.949.514.949.314.8 R1126.58.044.813.546.714.0 R1236.210.953.516.153.816.2 R1355.716.757.017.156.517.0 R1452.315.757.517.357.517.3 R1547.514.347.814.449.815.0 Mean51.715.552.315.752.915.9 [ 1B01 형 ][ 1C01 형 ]

29 북마크 기준설정 방법 성취수준 및 기초학력 경계선 학생들의 개념 협의 1라운드 2라운드 3라운드 난이도 순서로 배열된 문항집에 전문가가 표시 전문가 협의, 기대 정답률 1 차 조정 전문가 협의, 기대 정답률 2 차 조정 문항별 분할 점수 산출

30 기준설정 결과 예시

31

32 국어 4A03진단 결과표(예)

33

34 원점수능력 (Θ ) 원점수능력 (Θ ) 원점수능력 (Θ ) 1-4.2711-2.0121-0.59 2-3.6912-1.9022-0.30 3-3.3413-1.78230.13 4-3.0914-1.67240.90 5-2.8815-1.56250.94 6-2.7016-1.43 7-2.5417-1.31 8-2.3918-1.17 9-2.2619-1.01 10-2.1320-0.82

35

36

37 * E-mail: amec@cnu.ac.kr * Tel: (042) 821 - 8586 amec8586@hanmail.net