온·오프라인용 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 충남대학교 응용교육측정평가연구소

Presentation on theme: "온·오프라인용 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 충남대학교 응용교육측정평가연구소"— Presentation transcript:

1 온·오프라인용 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 충남대학교 응용교육측정평가연구소
안녕하세요? 이렇게 만나뵙게 되어서 대단히 반갑습니다. 지금부터 기초학력 진단-보정 시스템 온 오프라인용 문항 및 보충 학습 지도 자료 개발에 대해서 설명할 충남대학교 응용교육측정평가연구소 연구원 우 중 호 입니다. 인사드립니다. (인사) 지금부터 약 한 시간 정도 진단-보정 시스템이 어떻게 출발하여 개발되었는지 여러분 앞에서 설명드릴 것 입니다. 기초학력 진단-보정 시스템은 학습부진학생 및 기초학력 경계선상 학생들의 기초학력 향상을 위해 기초학력 수준 및 향상 정도를 주기적으로 진단하고 수준별 보충 학습 지도 자료를 통해 학생들을 지도하도록 한 시스템입니다. 기초학력 진단-보정 시스템 개발의 궁극적인 목적은 첫째, 학교에서 소외되기 쉬운 학습부진 학생들에 대한 학교와 교사의 관심을 높이고 맞춤형 진단 및 보충 학습 지도 자료를 학교에 보급하여 학생들의 학업적 성공경험을 반복적으로 경험하게 하여 학생들의 행복한 학교 생활에 도움이 되기 위함입니다. 기초학력 진단-보정 시스템은 2009년 대전광역시교육청의 지원 하에 충남대학교에서 초등학교 4학년용을 개발하기 시작하여, 2016년 현재에는 교육부의 지원을 받아 초등학교 3학년부터 중학교 3학년까지 총 7개 학년용을 개발하고 있습니다. 1:40 충남대학교 응용교육측정평가연구소

2 목차 1. 개발의 필요성 및 목적 2. 문항 및 보충 학습ㆍ지도 자료 개발 3. 도달 기준점수 산출
ㆍ2016 기초학력 진단검사 ㆍ2016 기초학력 향상도검사 목차입니다. 먼저, 기초학력 진단-보정 시스템 개발의 필요성과 목적에 대해 간단히 설명드리고, 문항과 보충 학습 지도 자료 늘품이에 대해 설명드릴 것 입니다. 여기서 3월 8일부터 시행되는 2016 기초학력 진단검사에 대해서도 자세히 말씀드릴 것 입니다. 다음으로는 저희가 도달 기준점수를 산출한 방법을 말씀드리고, 온라인에 기초학력 진단-보정 시스템이 어떻게 구현되었는지 간단히 설명드릴 것 입니다. 마지막으로 검사와 늘품이 연계 지도 방안에 대해 말씀드리겠습니다. 2:20 3. 도달 기준점수 산출 ㆍ검사동등화 ㆍ수정된 Angoff 방법 ㆍ북마크 방법 4. 온라인 시행을 위한 문항과 보충 학습ㆍ지도 자료 DB화 5. 응시생 진단 결과 연계 지도 방안

3 1장 개발의 필요성 및 목적 1장 개발의 필요성 및 목적입니다. 기초학력 진단-보정 시스템이 어떻게 개발되었는지, 저희가 현장에서 조사한 연구 결과를 통해 말씀 드리겠습니다. 2:30

4 교사의 입장에서 먼저 교사의 입장에서 들려온 마음의 소리입니다. 2:40

5 1장 개발의 필요성 및 목적 1. 어디까지인가? – 부진학생 선발 학습지진학생이었습니다.” “김00은 학습부진학생인줄 알았는데
1장 개발의 필요성 및 목적 1. 어디까지인가? – 부진학생 선발 “김00은 학습부진학생인줄 알았는데 학습지진학생이었습니다.” 선수학습 내용에 대한 이해가 없어서 본 학습을 수행할 수 없는 학습자들 안에서는 다양한 수준이 존재 학습부진, 학습지진, 특수 장애 등에 대한 교사의 판단이 어려움 교사의 책임 아래 지도가 가능한 학습부진학생의 범위 결정 → 학습부진학생과 학습지진학생에 대한 다른 지도전략 및 기대 되는 성취수준이 다름 첫번째 교사의 고민은 부진학생의 선발이 어디까지인가? 하는 것입니다. 현장에서는 특수 학급의 학생이나 학습지진학생도 보호자의 동의가 없으면 일반 학생들과 똑같은 교실에서 수업을 받도록 되어 있습니다. 또한 일부 관리자들이 자기 반 학생들은 모두 책임지고 학습부진학생에서 구제하라는 스트레스를 많이 받고 있다고 합니다. 그러나 학생들의 수준에는 다양한 수준이 존재합니다. 학습부진, 학습지진, 특수 장애 등 여러 가지가 있습니다. 그렇기 때문에 교사들의 이러한 학생들에 대해 계속 고민하게 된다고 합니다. 모두를 위한 컨텐츠가 있으면 물론 좋겠지만, 현실적으로 모든 학생들의 요구를 충족시키기는 어렵습니다. 학습지진이나 특수 학급의 학생들은 그들 특성에 맞는 컨텐츠를 통해 학습을 하여야 할 것입니다. 저희 기초학력 진단-보정 시스템은 기초학력 부진이나 경계선 학생에 맞추어 개발하였습니다. 3:30

6 1장 개발의 필요성 및 목적 2. 어디부터인가? - 출발점 진단 “수준파악만 하다가 한 학기 다 간다.”
1장 개발의 필요성 및 목적 2. 어디부터인가? - 출발점 진단 “수준파악만 하다가 한 학기 다 간다.” 초등학교 고학년, 중학생의 경우 더 심각 지도하는 과정에서 지도 수준을 낮추거나, 높이거나 하는 일들을 반복 → 이미 다른 학생들에 비해 뒤에 있는 학습부진학생들에게 정확하게 부진요소의 출발점을 찾는데 매년 반복적으로 많은 시간을 보내는 것은 매우 비효율적임 두번째 고민은 출발점 진단에 관한 것 입니다. 고학년으로 올라갈수록 기초학력 부진 학생의 수준 파악은 대단히 힘듭니다. 초등학교 6학년 학생이 학습부진 진단을 받았을 때, 이 학생이 과연 3R’s가 부족한 것인지, 직전 학년 내용에 대한 학습이 부족한 것인지 파악하기 대단히 어렵습니다. 학생의 수준을 마땅한 진단 도구가 없기 때문입니다. 4:00

7 1장 개발의 필요성 및 목적 3. 무엇으로 지도해야 하나? – 지도자료 선정 및 개발 교사들이 자료를 제작하거나…
1장 개발의 필요성 및 목적 3. 무엇으로 지도해야 하나? – 지도자료 선정 및 개발 “시중에서 판매되는 교재 중에서… 교사들이 자료를 제작하거나… 교육청에서 보급되는 자료로… 교육과정평가원 자료로…” 선수학습 부진요소에 대한 하위 학습내용 영역별 진단이 이루어진 후에, 그에 따른 맞춤형 지도자료를 찾기 어려움 → 학습자 학습 단계에 맞는 다양한 수준의 교재 개발이 충분하지 않음 세번째 고민은 지도 자료의 선정 및 개발에 대한 문제입니다. 앞에서 학생의 현재 위치에 대한 진단을 무사히 했다고 생각합니다. 그렇다면 이제 본격적으로 학생을 지도해야 합니다. 어떠한 교재로 지도해야 할 것인가? 라는 문제에 직면하게 됩니다. 시중에는 학력이 보통 이상 학생들을 위한 교재는 매우 많습니다. 그러나, 기초학력 학생을 위한 자료는 턱없이 부족합니다. 이러한 문제를 해결하기 위해 교사가 직접 자료를 제작하거나, 뜻이 맞는 몇몇 교사들이 모아서 자료를 제작하거나, 조금 넓게는 교육청 차원에서 자료를 만들어 보급하기는 하지만 아직은 기초학력 부진 학생을 위한 자료의 양이나 홍보는 부족한 실정입니다. 4:40

8 1장 개발의 필요성 및 목적 4. 어디서 멈추고 다음으로 진행해야 하나? – 향상도 진단
1장 개발의 필요성 및 목적 4. 어디서 멈추고 다음으로 진행해야 하나? – 향상도 진단 “그냥 쭉 지도하거나… 교재 한 권 끝내거나… 같은 시험지를 또 치르거나….” 눈에 보이는 목표를 설정해 놓고 그곳을 향해 뛰도록 하는 것은 학습동기를 불러 일으킬 수 있음 → 정확한 진단에 따른 학습자 개인별 목표 설정 및 도달여부 확인, 다음 학습계획 수립이 절실히 필요함 네번째는 지도 후에 겪게 되는 고민입니다. 적당한 보충 학습 지도 자료를 통하여 한 학기 동안 학생을 열심히 지도했습니다. 그러나 그 학생이 정말 기초학력을 갖추었는지를 진단하려면 또 어려움에 직면하게 됩니다. 정확한 진단에 따른 학습자 개인별 목표 설정 및 도달여부를 알아보는 것은 학생의 지도에 굉장히 중요합니다. 5:10

9 학생의 입장에서 다음은 학생 입장에서 들려온 마음의 소리입니다. 5:20

10 1장 개발의 필요성 및 목적 “악성바이러스, 전염병….” 1. 친구들이 저를 싫어해요 – 학습부진에서 왕따로
1장 개발의 필요성 및 목적 1. 친구들이 저를 싫어해요 – 학습부진에서 왕따로 “악성바이러스, 전염병….” 초등학교는 고학년으로 올라갈수록 학습부진학생들이 교실 내에서 존재감이 없어짐 왕따, 은따로 이어지거나, 자기 방어적 폭력 성향을 가지게 됨 → 학습의욕을 상실하는 것 뿐 아니라, 공부가 좀 뒤쳐진다는 이유로 마음의 상처를 가지게 되는 학생들 요즘 교실 분위기는 예전과는 많이 다른 것 같습니다. 제가 학교를 다닐 때만 해도, 주변에 학습 부진 학생이 있으면 도와주고, 주위에 공부 잘 하는 친구를 잘 활용하곤 했습니다. 잘 하는 친구가 직접 나서서 도와주기도 하고, 아니면 교사가 학생을 지정하여 서로 도와주도록 했습니다. 그러나 최근 교실에서는 공부를 못하는 아이는 무시를 당하고, 자기 방어적 폭력 성향을 가지게 되는 경우가 많다는 연구 결과도 제시되었습니다. 이는 학습 의욕 상실 뿐만 아니라, 왕따나 은따로 이어지는 사회적 문제로까지 발전하게 됩니다. 6:00

11 1장 개발의 필요성 및 목적 2. 선생님은 언제부터 화내실 거예요? – 지치는 교사들 나중에는 막 화내요.”
1장 개발의 필요성 및 목적 2. 선생님은 언제부터 화내실 거예요? – 지치는 교사들 “맨날 선생님은 처음에는 좀 친절했다가 나중에는 막 화내요.” 학생들 각자가 모두 다른 수준, 낮은 학습 의욕…… 지쳐가는 지도 교사의 희미해지는 다짐 → 친구들뿐만 아니라, 선생님들에게도 내쳐짐을 당하는 기분을 느끼는 학생들 좀 충격적인 말인데, 선생님은 언제부터 화내실 거에요? 라고 묻습니다. 보통 학습부진은 누적되어, 초등학교 때 학습부진 학생들은 중학교에서도 학습부진인 경우가 매우 많습니다. 그 학생들은 초등학교 때부터 학습부진학생 교육을 많이 받았습니다. 학생들이 관찰한 결과에 따르면, 처음에는 교사들도 의욕을 가지고 대단히 열의를 보인다고 합니다. 그러나 앞에서 보았듯이, 교사들도 다양한 문제와 맞닥뜨리게 되고 지치게 됩니다. 학생들은 귀신같이 알아차리고, 선생님을 원망하기 시작한다고 합니다. 6:40

12 1장 개발의 필요성 및 목적 3. 너무 멀어요 – 부진의 누적 “지금 2학년 것 해서 언제 5학년까지 와요?”
1장 개발의 필요성 및 목적 3. 너무 멀어요 – 부진의 누적 “지금 2학년 것 해서 언제 5학년까지 와요?” 이미 너무 누적되어버린 학습 부진에 대한 포기 심리 차라리 이제 공부는 관두자는 마음이 생기는 중학생들 → 아무리 노력해도 갈 길이 멀게 느껴지는 학생들 학생들이 생각하는 또다른 문제는, 부진이 계속 누적된다는 것입니다. 앞에서도 언급했지만, 학습부진은 누적되어, 저학년에서 학습부진 학생들은 계속해서 학습부진인 경우가 매우 많습니다. 5학년인 학생이 3학년 내용부터 부진이 누적되어, 열심히 노력하여 3학년 내용을 학습했다고 가정합시다. “어머니, oo이가 3학년 내용을 드디어 잘 알게 되었어요.” 라고 가정으로 말을 보냈을 때, 과연 대다수의 학부모들은 어떻게 생각하실까요. 부진은 계속해서 누적되기 때문에, 부진을 초기부터 진단-보정해줄 수 있는 시스템이 필요합니다. 7:30

13 학교의 입장에서 다음은 학교 입장에서 들려온 마음의 소리입니다. 7:40

14 1장 개발의 필요성 및 목적 1. 3D 업무 – 지원도 좋지만, 과중 업무는 그만
1장 개발의 필요성 및 목적 1. 3D 업무 – 지원도 좋지만, 과중 업무는 그만 “침묵은 금이고, 연설은 업무이다. 3D를 피하라!” 가르치는 본연의 일을 잘 할 수 없게 만드는 일부 업무들 학력 향상을 위한 다양한 지원도 담당한 교사에게는 엄청난 업무 부담 → 교사들의 업무 가중은 양질의 수업을 보장하기 어려움 학교에서 교사의 일은 굉장히 다양합니다. 가르치는 본연의 업무부터 시작해서, 생활지도, 상담, 기타 학교 업무 등 다양한 일이 있습니다. 그러나, 당연히 해야 할 가르치는 본연의 업무를 업무처럼 느끼게 하는 것들이 있습니다. 보통 기초학력 부진 학생을 지도하는 것이 굉장히 힘들고, 어려운 업무 중의 하나라고 생각하는 풍토가 있습니다. 8:10

15 1장 개발의 필요성 및 목적 “대한민국에서 교사로 살아가려면 만능이 되어야….”
1장 개발의 필요성 및 목적 2. 만능교사 – 각각의 영역에서 전문성을 갖춘 인력 지원 “대한민국에서 교사로 살아가려면 만능이 되어야….” 일반 학생들에 대한 학습지도와 생활지도 학습부진에 대한 다양한 문제를 가진 학생들에 대한 상담 및 지도의 어려움 → 학습부진학생들에 대한 차별화된 교수를 위해서는 다양한 분야의 전문성을 지닌 인력 지원 필요 보통 학습부진 학생들은 학습부진이 된 이유가 굉장히 다양합니다. 가정의 문제가 있을 수도 있고, 교우 관계의 문제일 수도 있습니다. 이러한 내용을 교사가 전부 다 케어하기란 굉장히 힘듭니다. 최근에는 전문상담교사나 위센터, 학습종합클리닉센터 등의 전문 기관이 일부 학생들에 대한 문제를 해결하려고 노력하나, 전체적으로는 부족한 실정입니다. 교사는 가르치는 본연의 업무에 좀 더 집중하는 것이 필요합니다. 8:40

16 1장 개발의 필요성 및 목적 상급 학년으로 올라갈수록 학생들의 누적적 학습결손 심화
1장 개발의 필요성 및 목적 상급 학년으로 올라갈수록 학생들의 누적적 학습결손 심화 학생들이 적시에 교육과정을 적절히 이수하고 있는지를 정확히 진단하고 보정 기초학력 미달 학생들의 수준에 적합한 자료로 지속적, 반복적 맞춤형 진단 보정 개인별 기초학력 수준을 구체적으로 파악하기 어려움 기초학력 진단-보정 시스템은 위와 같은 현장의 목소리를 담아 출발했습니다. 상급학년으로 갈수록 학생들의 학습 결손은 계속 누적됩니다. 기초학력부진 학생들이 적시에 교육과정을 이수하고 있는지를 판단하고, 보정할 수 있도록 하며, 지속적이고 반복적으로 보정이 가능하도록 했습니다. 또한, 학생이 부진한 영역에 대한 정확한 출발점 진단을 바탕으로 하여 학습이 지원되도록 했습니다. 그리고 기초학력 도달 기준에 대한 전국 척도를 적용함으로써, 학교나 지역에 따라 다른 기준이 적용되는 혼란을 없애고, 정확한 전국 기준으로 학생의 기초학력 도달/미도달을 판단할 수 있도록 했습니다. 9:30 상급학년 부진 학생일수록 개인 학생의 부진 요소 파악 어려움 학생의 부진 출발점에 대한 정확한 진단을 통해 학습 지원 기초학력 도달 기준에 대한 동일한 척도 필요 동일한 학년임에도 불구하고 지역, 학교 등 소속 집단에 따른 기준점 적용 검사동등화, 기준설정 작업을 통해 기초학력 도달 기준 점수 산출

17 2장 문항 및 보충 학습ㆍ지도 자료 개발 2장에서는 기초학력 문항 및 보충 학습 지도 자료 늘품이의 개발에 대해 말씀드리겠습니다. 9:40

18 2장 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템의 기관별 역할 시ㆍ도교육청 교육부 응용교육측정평가연구소
2장 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템의 기관별 역할 - 표집학교 선정 및 시행 - 연구 개발진 선발과 지원 - 기초학력 향상도 검사 온라인 시범시행 결과 피드백 제공 시ㆍ도교육청 - 사업의 기본 방향 제시 - 시도교육청에 대한 행·재정적 지원 - 사업 진행상황 점검 교육부 기초학력 진단-보정 시스템의 기관별 역할에 대해 간단히 말씀드리겠습니다. 저희 충남대학교 응용교육측정평가연구소에서는 문항과 보충 학습 지도 자료인 늘품이 개발, 표집 시행을 통한 도달기준점수의 선정을 맡고 있습니다. 한국교육학술정보원에서는 기초학력 진단-보정 시스템의 온라인 시스템 구축을 맡고 있으며, 교육부에서 행정적, 재정적 지원을 받고 있습니다. 10:10 - 검사동등화, 기준설정 - 문항 DB작업 - 성적산출 프로그램 개발 - 문항 개발, 늘품이 개발 - 표집시행 - 온라인 탑재 문항 및 늘품이 검토 응용교육측정평가연구소 - 기초학력 향상도 검사 온라인 시행 및 자료 활용, 피드백 단위 학교 - 기초학력 향상도 검사 온라인 시스템 구축, 활용 연수 한국교육학술정보원 18

19 2장 문항 및 보충 학습·지도 자료 개발 기초학력 향상도 검사의 운영 흐름도
2장 문항 및 보충 학습·지도 자료 개발 기초학력 향상도 검사의 운영 흐름도 기초학력 진단-보정 시스템의 흐름에 대해 말씀드리겠습니다. 3월 초, 기초학력 진단검사를 통해 학생의 기초학력 도달/미도달 여부를 판별합니다. 그 후에 미도달 학생과 교사가 추천한 기초학력 경계선 학생들을 늘품이로 보정 지도합니다. 그 후, 1차 향상도 검사를 통하여 학생이 도달하였는지를 확인합니다. 이렇게 3단계에 걸쳐서 학생의 향상도를 진단하기 위한 검사와 맞춤형 보충 학습 지도 자료인 늘품이가 개발되어 있고, 위와 같은 흐름을 통해 기초학력 진단-보정 시스템이 진행됩니다. 10:40

20 2장 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 개요
2장 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 개요 기초학력 진단-보정 시스템의 개요에 대해서 말씀드리겠습니다. 대상 학년은 초등학교 3, 4, 5, 6학년에서 중학교 1, 2, 3학년까지 7개 학년입니다. 기초학력 진단-보정 시스템의 검사는 학년 초 진단검사와 이후의 향상도검사로 이루어져 있습니다. 학년 초 진단검사로 학생의 수준을 진단하여, 이후에는 향상도검사를 통해 기초학력 미달과 경계선 학생들에 대한 진단-보정이 이루어집니다. 초등학교 3R’s 읽기, 쓰기, 셈하기로 구성되었습니다. 초등학교 3R’s는 탄탄과 쑥쑥으로 이루어져 있는데, 탄탄은 초등학교 1~2학년 교육과정으로 개발되었으며, 쑥쑥은 초등학교 1~3학년 교육과정으로 각 검사형별로 2종씩 개발되었습니다. 3R’s는 교과서 외 지문으로 개발이 되었습니다. 초등학교 4, 5, 6학년 국어, 사회, 수학, 과학, 영어와 중학교 1, 2, 3학년의 국어, 사회(역사), 수학, 과학, 영어 과목이 개발되었습니다. 진단검사인 G, Z형과 향상도검사인 A,B,C형으로 이루어져 있으며 각 검사형에 따라 검사 범위가 다릅니다. 진단검사와 향상도검사 A형은 이전 학년의 1~2학기 과정으로 이루어져 있습니다. 향상도 B형은 이전학년 2학기~ 현 학년 1학기 과정으로 이루어져 있습니다. 마지막으로 C형은 현 학년 1~2학기 11월 둘째 주 교육과정 까지인데, 12월 겨울방학 전에 마지막 향상도 진단이 이루어지기 위함입니다. 13:00

21 2장 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 개요
2장 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 개요 초등학교는 25문항, 중학교는 30문항 선다형으로 개발되었습니다. 그러나 초등학교 3R’s는 선다형과 단답형이 혼합된 형태로 개발하였습니다. 검사 시기는 학년 초 3월의 진단검사와, 이후의 향상도검사로 이루어져 있습니다. 올 해 진단검사는 3월 8일 이후 학교에서 자율 시행의 형태로 이루어지는데, 이 내용은 잠시 후에 설명드리도록 하겠습니다. 향상도검사는 시도교육청에서 지정한 평가 기간 내에 학교에서 자율 시행의 형태로 이루어집니다. 각 시도교육청에 따라 2~3회 이루어집니다. 보충 학습 지도 자료인 늘품이는 각 문항과 연계하여 해당 문항을 풀기 위해 필요한 핵심 내용(핵심 콕콕)과 보충 문항(실력다지기)로 이루어져 있습니다. 늘품이는 3R’s 읽기, 쓰기, 셈하기, 초등학교와 중학교 국어, 사회, 수학, 과학, 영어 과목 모두 개발되어 있으며 무학년 지도자료인 수학 단계별 연산자료, 국어 읽기 이해자료, 알파벳 지도자료도 개발되어 있습니다. 검사 후에 받아보실 수 있는 진단 결과표에는 학생 개인별 교과별, 내용 영역별 도달/미도달 여부, 정답 여부, 평가요소 등을 제공합니다. 14:50

22 2장 문항 및 보충 학습·지도 자료 개발 2016 기초학력 진단검사 시행 방법 구 분 내 용 오프라인 온라인 유의사항
2장 문항 및 보충 학습·지도 자료 개발 2016 기초학력 진단검사 시행 방법 구 분 내 용 오프라인 시도교육청에 2월 16일(화)에 검사지와 보정자료(늘품이) CD 제공함 - 인쇄하여 3월 8일 부터 사용 가능함 - 기준점수 확인: 3월 22일 이후 공문을 통해 확인 온라인 시도교육청별 온라인 기초학력 진단-보정 시스템에 검사지 탑재함 - 3월 8일 이후 온라인 사용 가능함 - 기준점수 확인: 3월 24일 이후 확인 가능함 단, 초등학교 3R’s의 경우는 온라인으로 시행하지 않음 유의사항 기초학력 진단검사는 2종 검사형(진단, Z형)이 제공됨. 다만, Z형은 동등화용 검사로서 진단 도구용으로 진단검사 문항과 기초학력 향상도 평가 문항의 조합으로 구성되어 있음. 따라서 새로 개발된 진단 도구용(G형) 검사의 활용을 권장함. 2016 기초학력 진단검사에 대해 말씀드리겠습니다. 아마 이 것에 관심이 가장 많으실 텐데요. 시행은 오프라인과 온라인 두 가지로 나누어 사용합니다.(시도 특성에 따라서 설명) 오프라인으로 시행하는 경우, 저희가 2월 16일에 시도교육청에 검사지와 보정자료 CD를 전달했습니다. 검사지는 3월 8일부터 사용 가능하나, 도달/미도달 기준점수는 바로 확인할 수 없습니다. 저희도 바로 제공하고 싶으나, 3월 8일에 전국적으로 실시되는 표집 결과를 바탕으로 도달/미도달 기준점수를 데이터를 통해 알아내는 작업을 거쳐야 하기 때문에, 3월 22일(화) 이후에 공문을 통해 기준점수를 확인하실 수 있습니다. 온라인으로 시행하는 경우도 마찬가지로 3월 8일 이후에 사용 가능하며, 각 시도교육청별 온라인 기초학력 진단-보정 시스템에 검사지를 탑재 완료하였습니다. 온라인의 경우 온라인에 기준점수를 탑재하는 시간이 소요되어 3월 24일(목) 이후에 기준점수를 확인할 수 있습니다. 단, 초등학교 3R’s의 경우에는 이번에는 온라인으로 검사를 시행하지 않습니다. 진단검사는 G형과 Z형으로 나뉘어 제공됩니다. 다만, Z형은 도달 기준점수를 정하기 위해 만들어진 검사형으로 주로 표집학교에 활용됩니다. Z형은 이번에 개발된 진단검사 문항과 작년에 개발된 기초학력 향상도 검사 문항의 조합으로 이루어져 있기 때문에, 새로 개발된 검사형은 G형의 활용을 권장하는 바 입니다. 17:00 (CD로 설명하면서 보여주기) 27:00

23 2장 문항 및 보충 학습·지도 자료 개발 … C B A 기초학력 진단-보정 시스템 시행 개요 문제은행
2장 문항 및 보충 학습·지도 자료 개발 기초학력 진단-보정 시스템 시행 개요 기초학력 향상도 검사 개발 검사 동등화 앞에서 말씀드린 기초학력 진단-보정 시스템의 시행 개요를 그림으로 한번 더 나타내 보았습니다. 기초학력 진단-보정 시스템은 진단검사와 향상도검사를 통해 진단하고, 보충 학습 지도 자료인 늘품이로 맞춤형 지도가 가능한 시스템입니다. 27:30 A B C … 문제은행 상시적 시행 향상도(초3~중3) 늘품이로 맞춤형 지도

24 2장 문항 및 보충 학습·지도 자료 개발 문항 및 늘품이 개발의 절차 1. 검사목적 확인 6. 문항 검토 및 수정
2장 문항 및 보충 학습·지도 자료 개발 문항 및 늘품이 개발의 절차 B시리즈에서 세 문항을 포함할 수 있는 늘품이 차례 제목을 정함 → 네 자리 수까지의 덧셈과 뺄셈 ‣ 위와 같이 문항 매핑을 하고 유사한 평가요소별로 묶어서 학습내용 목차가 완성되면 교육과정 순서(학습의 논리적 계열)에 따라 내용 차례를 정함 1. 검사목적 확인 2. 평가 장면의 선정 3. 검사명세서 작성 4. 내용분류표 작성 5. 문항 초안 작성 6. 문항 검토 및 수정 7. 검사지 편집 8. 점독 9. 듣기 문항 녹음 10. 검사지 마스터본 확인 11. 늘품이 내용 차례 개발 12. 늘품이 개발 13. 늘품이 검토 14. 늘품이 검수 및 확인 15. 문항-늘품이 DB 작성 문항과 보충 학습 지도 자료 늘품이는 다음과 같은 단계로 개발이 이루어집니다. 먼저 2009 개정교육과정 성취기준에 따라 꼭 필요한 성취기준을 골라서 검사명세서와 내용분류표를 작성합니다. 이를 통해 검사 문항을 개발합니다. 문항 개발은 수 차례 검토와 점독을 거쳐서 확정됩니다. 문항이 확정되면, 교육과정 차례에 따라 늘품이 차례를 개발합니다. 그 다음 늘품이 내용을 개발하고, 수 차례 검토를 거쳐 확인 절차를 거칩니다. 마지막으로 문항과 늘품이를 매핑하여 DB를 작성하게 됩니다. 28:10

25 2장 문항 및 보충 학습·지도 자료 개발 기초학력 향상도 검사 문항과 늘품이 연계표 과목 학년 검사지 문항 번호 하위 영역
2장 문항 및 보충 학습·지도 자료 개발 기초학력 향상도 검사 문항과 늘품이 연계표 과목 학년 검사지 문항 번호 하위 영역 평가요소 늘품이 자료명 영어 중1 A01 1 듣기 출신지 묻고 답하는 표현 이해하기 1. 자기 소개하기 2 날씨를 묻고 답하는 표현 이해하기 2. 계절ㆍ날씨 묻고 답하기 3 미래의 계획을 나타내는 표현 이해하기 3. 미래의 계획, 하고 싶은 일에 대해 말하기 4 길을 안내하는 표현 이해하기 4. 길 묻고 답하기 5 대화가 이루어지는 장소 파악하기 5. 장소 파악하기 6 특정 날짜를 나타내는 표현 6. 날짜ㆍ요일ㆍ특정일 묻고 답하기 7 사물의 위치를 설명하는 표현 7. 전치사 활용하기(위치ㆍ시간 표현하기) 8 원인을 말하는 표현 이해하기 8. 이유ㆍ의견 묻고 답하기, 되묻는 표현 익히기 9 좋아하는 것을 묻고 답하는 표현 이해하기 9. 일반 동사의 활용ㆍ부정문ㆍ의문문 10 외모를 묘사하는 표현 이해하기 10. 외모 묘사하기 다음은 기초학력 향상도 검사 문항과 늘품이 자료명의 예시입니다. 예를 들어, 영어과 중학교 1학년 A01 검사지의 1번 듣기 영역의 평가요소는 출신지를 묻고 답하는 표현 이해하기입니다. 이에 맞추어, 늘품이 자료 1. 자기 소개하기가 매핑되어 있습니다. 즉, 1번 문항을 해결하는데 필요한 평가요소의 내용을 바탕으로 제작된 보충 학습 지도 자료가 각각의 문항에 매핑되어 있는 것입니다. 28:40

26 2장 문항 및 보충 학습·지도 자료 개발 보충 학습ㆍ지도 자료 ‘늘품이’ 소개 ◎ 과목별 목차
2장 문항 및 보충 학습·지도 자료 개발 보충 학습ㆍ지도 자료 ‘늘품이’ 소개 ◎ 과목별 목차 - 향상도 검사 관련 문항 번호와 평가 요소 및 해당 쪽수로 구성 학생들의 기초학력 수준을 진단에서 그치지 않고, 보충 학습 지도 자료인 늘품이가 함께 결합되어 제공됩니다. 늘품이는 향상도 검사와 관련된 문항과 결합된 페이지와, 필수적인 내용을 정리한 핵심콕콕~이 있고, 핵심 내용을 잘 학습했는지를 알아보기 위한 실력다지기 문항으로 구성되어 있습니다. 초등학교 4학년~ 중학교 3학년 늘품이는 학생용과 교사용으로 구성되어 있습니다. 왼쪽이 학생용, 오른쪽이 교사용입니다. 교사용에는 정답과 해설이 파란 색으로 표시되어 있습니다. 교사용은 보통 현직교사를 타겟으로 구성되었다기 보다는 대학생 멘토링이나 학습보조교사등이 활용할 수 있도록 간단한 해설로 구성되어 있습니다. 29:20 ◎ ｢늘품이｣ 카드 내용 - 향상도 시스템의 검사 문항을 아우르는 학습 요소로 구성 - 해당 검사형의 관련 평가문항 번호, [핵심콕콕], [실력다지기]로 구성

27 2장 문항 및 보충 학습·지도 자료 개발 보충 학습ㆍ지도 자료 늘품이 예시
2장 문항 및 보충 학습·지도 자료 개발 보충 학습ㆍ지도 자료 늘품이 예시 늘품이는 맨 앞에 향상도 검사와 관련된 문항번호와 쪽수가 표시되어 있습니다. 예를 들어, 1. 세 자리 수의 덧셈 단원에 해당하는 관련 문항은 향상도 검사의 A01의 1번 문항이 됩니다. 다음 그림의 예시와 같이, 향상도 검사 문항과 늘품이 카드가 맵핑되어 있습니다. 29:50

28 3장 도달 기준점수 산출 3장 도달 기준점수 산출에 대해서 말씀드리겠습니다. 도달 기준점수는 대단히 중요합니다. 학생이 1문제에 따라 기초학력 도달과 미도달이 나누어지기 때문입니다. “대충 시험 봐서 60점 이하는 기초학력 부진으로 하자.”라는 말을 떠올려 보십시오. 얼마나 이 말이 무책임한 말인지 생각해보셨으면 좋겠습니다. 학생이 사는 지역에 따라, 학교에 따라, 또는 문제의 난이도에 따라 도달 기준은 매우 달라질 수 있습니다. 그렇기 때문에 도달 기준점수는 명확한 기준으로 산출하여야 합니다. 기초학력 진단-보정 시스템은 검사동등화 방법과 수정된 앵고프, 북마크 기준설정 방법을 통해 기준을 설정합니다. 30:20

29 3장 도달 기준점수 산출: 검사동등화 검사동등화란? 검사동등화 검사간 난이도 차이를 통계적으로 조정하여 능력차이가 아닌
3장 도달 기준점수 산출: 검사동등화 검사동등화란? 검사동등화 검사간 난이도 차이를 통계적으로 조정하여 능력차이가 아닌 난이도 차이에 따라 기준에 도달/미도달 되지 않도록 함 가장 먼저, 검사동등화 방법에 대해서 간단하게 말씀드리겠습니다. 검사동등화 방법은 검사간 난이도 차이를 통계적으로 조정하여 난이도 차이에 따라 기준점수를 조정하는 방법으로, 서로 다른 검사에서 얻어진 점수를 직접 비교 가능하도록 하는 방법입니다. 다음 그림을 보시겠습니다. 30:50 서로 다른 검사에서 얻어진 점수라도 동등화 후에는 점수를 직접 비교 가능

30 3장 도달 기준점수 산출: 검사동등화 진단, A, B, C형을 검사동등화 방법으로 점수간 비교표를 산출하여 어떤 향상도 검사지로 시험을 치르든지 간에 점수를 직접 비교할 수 있게 해줍니다. 예를 들어 진단검사에서 기준점수 14점을 통해 A형에서 기준점수 15점을 산출해낼 수 있는 방법입니다. 31:10

31 3장 도달 기준점수 산출: 수정된 Angoff 기준설정
성취수준 및 기초학력 경계선 학생들의 개념 협의 수정된 앵고프 방법입니다. 수정된 앵고프 방법은 평가 영역을 검토한 후 기대정답률을 판정하여 기준점수를 산출하는 방법입니다. 기초학력 진단-보정 시스템에서는 중학교 사회, 역사 과목을 다음과 같은 방법으로 기준설정 하였습니다. 기준설정에는 전국 17개 시도교육청 소속 현직 교사들이 연구소와 함께 기준점수를 결정하는 작업을 거쳐서 객관성을 갖도록 했습니다. 31:40 1라운드 2라운드 3라운드 평가 영역 검토 후 기대 정답률 판정 전문가 협의, 기대 정답률 1차 조정 전문가 협의, 기대 정답률 2차 조정 문항별 분할 점수 산출

32 3장 도달 기준점수 산출: 수정된 Angoff 기준설정
기준설정 결과 예시(사회) [ 1B01형 ] [ 1C01형 ] 1라운드 2라운드 3라운드 Rater ID Mean 기준 점수 R01 60.2 18.1 56.5 17.0 55.7 16.7 R02 52.0 15.6 36.3 10.9 45.3 13.6 R03 56.7 59.7 17.9 59.3 17.8 R04 57.0 17.1 54.2 16.3 R05 67.3 20.2 53.5 16.1 52.8 15.9 R06 44.8 13.5 53.3 16.0 53.2 R07 47.3 14.2 62.7 18.8 60.3 R08 58.5 17.6 46.5 14.0 49.2 14.8 R09 54.0 16.2 52.2 15.7 55.3 16.6 R10 48.2 14.5 49.3 R11 26.0 7.8 45.5 13.7 47.8 14.4 R12 41.5 12.5 R13 55.2 55.0 16.5 R14 55.8 16.8 R15 51.3 15.4 51.7 15.5 52.4 1라운드 2라운드 3라운드 Rater ID Mean 기준 점수 R01 54.3 16.3 52.7 15.8 52.2 15.7 R02 55.0 16.5 37.8 11.4 45.7 13.7 R03 60.8 18.3 58.2 17.5 57.5 17.3 R04 56.0 16.8 54.2 R05 62.5 18.8 52.8 15.9 R06 49.7 14.9 52.5 R07 46.5 14.0 59.5 17.9 58.5 17.6 R08 57.7 52.0 15.6 R09 55.5 16.7 54.5 16.4 54.7 R10 59.7 49.5 49.3 14.8 R11 26.5 8.0 44.8 13.5 46.7 R12 36.2 10.9 53.5 16.1 53.8 16.2 R13 55.7 57.0 17.1 56.5 17.0 R14 52.3 R15 47.5 14.3 47.8 14.4 49.8 15.0 51.7 15.5 52.9 다음은 기준점수를 산출한 예시입니다. 전국의 열다섯 지역의 현직 교사들이 중학교 사회과 기준설정에 참여하여 산출된 결과입니다. 기준점수 산출 결과, 16개를 기초학력 도달/미도달의 기준으로 설정하였습니다. 32:00

33 3장 도달 기준점수 산출: 북마크 기준설정 북마크 기준설정 방법 1라운드 2라운드 3라운드
성취수준 및 기초학력 경계선 학생들의 개념 협의 북마크 방법입니다. 북마크 방법은 평가 영역을 검토한 후 난이도 순서로 배열된 문항집에 전문가가 기초학력 경계선 학생이 해결할 수 있는 마지막 문제를 판정하여 기준점수를 산출하는 방법입니다. 기초학력 진단-보정 시스템의 기준설정에는 전국 17개 시도교육청 소속 현직 교사들이 연구소와 함께 기준점수를 결정하는 작업을 거쳐서 객관성을 갖도록 했습니다. 32:30 1라운드 2라운드 3라운드 난이도 순서로 배열된 문항집에 전문가가 표시 전문가 협의, 기대 정답률 1차 조정 전문가 협의, 기대 정답률 2차 조정 문항별 분할 점수 산출

34 3장 도달 기준점수 산출: 북마크 기준설정 기준설정 결과 예시
다음은 북마크 기준설정의 예시입니다. 수정된 앵고프 방법과 마찬가지로 전국의 현직 교사들이 연구소와 함께 기준점수를 결정하는 작업을 했습니다. 32:40

35 4장 온라인 시행을 위한 문항과 보충 학습ㆍ지도 자료 DB화
다음은 4장, 기초학력 진단-보정 시스템의 온라인 시행에 대해서 말씀드리겠습니다. 기초학력 진단-보정 시스템은 오프라인 뿐만 아니라 온라인으로도 시행이 가능합니다. 각 교육청별로 구축된 서버를 통해서 온라인 시행이 가능한데, 이 내용에 대한 실습은 다음 시간에 한국교육학술정보원에서 실습을 해주실 예정입니다. 저희는 온라인에 기초학력 진단-보정 시스템이 어떻게 업로드되었는지 간단히 말씀드리겠습니다. 33:00

36 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름도
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름도 검사문항 및 보충 학습 · 지도 자료 개발 온라인 탑재 온라인 기초학력 진단-보정 시스템 탑재는 다음과 같은 순서로 이루어집니다. 먼저, 검사문항과 보충학습지도자료 개발이 끝나면 온라인에 탑재합니다. 온라인에 탑재하는 과정에서 오류가 생길 수 있기 때문에, 검토상의 오류가 발생하지 않을 때 까지 탑재 및 수정을 반복합니다. 이렇게 탑재된 기초학력 진단-보정 시스템은 최종적으로 시도교육청 서버로 이관되어 시도별 온라인 평가가 시행되는 것입니다. 33:20 탑재한 문항 및 보충 학습 · 지도 자료 검토 검토 상의 오류가 발견되지 않을 때까지 이 단계를 반복 문항 및 보충 학습 · 지도 자료 수정 후 시 · 도 교육청 서버로 이관 시 · 도별 온라인 평가 시행

37 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 다음은 온라인 탑재 화면의 예시입니다.
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 다음은 온라인 탑재 화면의 예시입니다. 33:30

38 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 각 문항은 다음과 같이 문두, 지문, 보기, 정답으로 나뉘어 온라인에 업로드됩니다. 33:40

39 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 온라인 시행 화면입니다. 문항이 업로드되면 학생의 컴퓨터에 보이는 화면입니다. 물론 관리자 화면이기 때문에, 학생에게 정답은 보이지 않습니다. 이 문제를 볼까요? 다음 밑줄에 공통으로 들어갈 말은 한약이 매우 쓰다. 날씨가 추워 모자를 쓰다. 종호는 오늘 일을 일기에 쓰다. 정답은 쓰다 입니다. 그리고, 이 문제의 평가요소는 상황에 따라 글자는 같지만 뜻이 다른 낱말 알기 입니다. 34:20

40 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 1번 문항에 다음과 같은 평가요소를 확인할 수 있습니다. 34:30

41 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 또한 각각 문항에 따른 보정자료도 연결되어 있습니다. 34:40

42 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 다음은 보정자료와 문항이 연결된 화면 예시입니다. 34:50

43 4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름
4장 온라인 시행을 위한 문항과 보충 학습·지도 자료 DB화 온라인 탑재 및 검수 흐름 이러한 흐름으로 온라인 문항과 보충학습지도자료의 업로드가 이루어집니다. 35:00

44 응시생 진단 결과 연계 지도 방안 5장 마지막으로 검사 문항의 측정 내용과 난이도, 응시생 진단 결과 연계 지도 방안에 대해 말씀드리겠습니다. 35:10

45 5장 응시생 진단 결과 연계 지도 방안 국어 4A03진단 결과표(예)
다음은 진단 결과표의 예시입니다. 내용영역, 문항수, 기준점수, 나의 점수, 도달 여부를 제공합니다. 예를 들어, 국어의 듣기, 말하기, 쓰기 영역의 문항 수는 9문항이며, 기준점수는 5점, 나의 점수는 4점으로 도달 여부는 미도달입니다. 35:30

46 5장 응시생 진단 결과 연계 지도 방안 진단 결과표에는 각 문항의 평가요소, 정답 여부, 전체 정답률(표집의 정답률입니다.) 내용영역을 제공합니다. 그렇다면 학생을 지도할 때, 어떤 방법으로 지도하는 것이 가장 바람직할지 생각해볼까요. 아무래도, 학생이 틀린 문제 중에서 정답률이 높은 문항을 우선적으로 학습하는게 좋을 것입니다. 학생이 틀린 문항 중에서 정답률이 90%이상인 문제만 음영을 쳐 놓았습니다. 그 중에서 예를 들어, 10번 독서 감상문에서 책의 내용과 생각 구별하기는 정답률 94.8%이며, 13번 독서감상문 쓰는 방법 알기 문제입니다. 정답률 94.5%입니다. 36:10

47 문항을 난이도 별로 배열하였을 때, 도달 기준에 해당하는 바로 아래에 있는 문제가 위의 두 문제입니다
문항을 난이도 별로 배열하였을 때, 도달 기준에 해당하는 바로 아래에 있는 문제가 위의 두 문제입니다. 만약 경계선 학생이라면, 다음 내용은 꼭 정답을 해야 아무래도 도달 확률이 높아지게 되지요. 36:30 원점수 능력(Θ ) 1 -4.27 11 -2.01 21 -0.59 2 -3.69 12 -1.90 22 -0.30 3 -3.34 13 -1.78 23 0.13 4 -3.09 14 -1.67 24 0.90 5 -2.88 15 -1.56 25 0.94 6 -2.70 16 -1.43 7 -2.54 17 -1.31 8 -2.39 18 -1.17 9 -2.26 19 -1.01 10 -2.13 20 -0.82

48 그렇기 때문에, 다음 내용에 대해 보충학습지도자료를 통하여 다음과 같은 내용에 대해 우선적으로 학습할 수 있습니다.
36:50

49 (보정자료 화면 예시)

50 5장 응시생 진단 결과 연계 지도 방안 중학교 국어 2A02진단 결과표(예)
5장 응시생 진단 결과 연계 지도 방안 중학교 국어 2A02진단 결과표(예) 중학교 국어과목으로 예를 하나 더 들겠습니다. 이 학생은 기준점수 17개에 14개로 미도달입니다. 37:00

51 5장 응시생 진단 결과 연계 지도 방안 15번 글의 형식의 맞는 글감 선정하기는 정답률 94.2% 문제입니다. 37:10

52 난이도 순서로 문항을 배열한 결과, 위 문제는 도달 기준보다 한참 아래에 있는 문제입니다.
꼭 맞추었어야 하는 문제였다는 뜻이지요. 이와 같은 방법으로, 개별 학생에 대한 보정 지도가 가능한 시스템입니다. 37:30 원점수 능력(Θ ) 1 -4.94 11 -2.22 21 -0.89 2 -4.11 12 -2.09 22 -0.72 3 -3.67 13 -1.97 23 -0.54 4 -3.37 14 -1.84 24 -0.33 5 -3.14 15 -1.72 25 -0.09 6 -2.95 16 -1.59 26 0.20 7 -2.78 17 -1.46 27 0.56 8 -2.63 18 -1.33 28 1.05 9 -2.49 19 -1.19 29 1.88 10 -2.35 20 -1.05 30 1.94

53 THANK YOU 충남대학교 응용교육측정평가연구소
지금까지 기초학력 진단-보정 시스템 온 오프라인용 문항 및 보충 학습 지도 자료 개발에 대해서 설명을 드렸습니다. 계속해서 말씀드렸다시피, 기초학력 진단-보정 시스템은 학습부진학생 및 기초학력 경계선상 학생들의 기초학력 향상을 위해 기초학력 수준 및 향상 정도를 주기적으로 진단하고 수준별 보충 학습 지도 자료를 통해 학생들을 지도하도록 한 시스템입니다. 현장에서 많은 활용을 통해 학생들의 기초학력 향상에 많은 보탬이 되었으면 합니다. 이상 마치겠습니다. 감사합니다.(인사) 38:00 충남대학교 응용교육측정평가연구소 * * Tel: (042)