형성평가시스템 활용을 통한 단위학교의 형성평가 지원 방안

본 연구에서 활용한 형성평가시스템은 평가도구 개발, 평가 시행, 채점, 평가결과 제공 등과 같이 학교 현장에서 교사가 형성평가를 실시하기 위한 제반 과정을 지원하며, [그림 1]과 같이 운영시스템과 세 가지 하위 시스템으로 구성되어 있다. 운영시스템은 세 가지 하위 시스템을 관리하고, 사용자 계정 관리, 커뮤니티(공지사항, 게시판 운영) 등 형성평가시스템의 전반적인 운영에 관한 기능을 한다. 또한 하위 시스템은 문항관리시스템, 채점시스템, 피드백시스템의 세 가지로 구성되어 있으며 다음과 같은 기능을 가지고 있다. 첫째, 문항관리시스템은 형성평가의 시행을 지원하기 위하여 문항, 해설 등의 평가도구를 관리한다. 둘째, 채점시스템은 형성평가 시행에 따라 학생 답안을 입력 및 저장하고, 학생 답안을 채점하여 평가 결과를 산출한다. 또한 학교에서 시행되는 수행평가를 포함한 여러 가지 평가 결과를 입력하여 통합 관리할 수 있는 기능도 가지고 있다. 셋째, 피드백시스템은 성취기준에 기반을 두어 다양한 형태로 피드백 자료를 산출하고 교사 및 학생에게 맞춤형 정보를 제공한다.

그림 1. 형성평가시스템의 구성

Download Original Figure

형성평가시스템의 콘텐츠로 중학교 수학 5개 영역의 전체 성취기준에 대한 평가도구(문항 및 해설)와 피드백 자료(성취수준별 매핑 및 선수학습 안내 자료)를 탑재하였다. 성취수준별로 원하는 문항을 선택할 수 있도록 성취수준 상, 중, 하의 문항 개수를 동일하게 각각 5개씩(성취기준별 15문항) 개발하여 총 1,305 문항을 탑재하였다. 형성평가 문항 유형은 선택형과 단답형으로 구성하였으며, 단답형 문항에 대한 응답은 숫자 또는 문자로 한정하여 자동 채점이 이루어진다. 이를 기반으로 교사와 학생은 형성평가시스템을 활용하여 학습 성과를 파악하고자 하는 성취기준에 대해 형성평가를 시행하고, 그 결과를 성취기준 단위로 제공받을 수 있다.

또한 학생 수준 진단 및 맞춤형 피드백을 위한 피드백 자료 개발을 위해 기존 연구에서는 [성취수준]과 [선수 성취기준]을 연결하는 매핑 방식을 활용하였으나, 본 연구에서는 [성취수준]과 [선수 성취수준]을 연결하는 방식으로 개선하였다. 뿐만 아니라 형성평가 도구의 개발 범위를 중학교 수학 전 영역으로 확대함에 따라 피드백 자료의 개발 범위도 확대하여 총 348개의 피드백 자료(학습 도움말)를 개발하였다. 형성평가시스템에서 제공하는 형성평가 도구 및 피드백 자료는 다음 <표 1>과 같이 구성되어 있다.

형성평가를 온라인으로 시행하는 방식으로 형성평가시스템을 적용한 3개 학교는 일A중, 동D중, 신B중이다. 먼저 일A중은 한 단원이 완료된 후 단원평가 형태로 형성평가를 시행하였다. 한 단원에 포함된 성취기준에 대한 수업은 일반 교실에서 실시하고 한 단원이 종료된 마지막 차시에 컴퓨터실에서 온라인으로 형성평가를 실시하였으며, 함수 영역과 확률과 통계 영역이 종료된 각 시점에 2회 적용하였다. 교사는 해당 단원의 성취기준 중 핵심 성취기준을 선택하여 형성평가를 제작하였으며, 학생들은 온라인으로 형성평가를 시행하였고, 시행이 종료된 후 학생들은 교사와 함께 평가 결과를 확인하였다. 또한 형성평가시스템에 포함된 문항들이 선다형과 단답형으로 이루어져 있는 것에 착안하여, 일주일동안 형성평가시스템에 들어와서 문항 및 해설을 복습하도록 한 다음, 일주일 후에 형성평가에 활용한 문항을 변형하여 서술형 수행평가를 시행하는 방식으로 활용하였다. 이를 통해 학생들은 평가 결과를 통한 피드백을 제공받고, 복습을 지속적으로 실시하면서 이후 학습을 위해 자신의 부족한 점을 보완할 수 있는 기회를 제공받는 것이다. 이는 형성평가시스템을 활용하여 학생이 자신의 학습전략을 수립하고 장기적으로 자기주도적 학습 역량을 개발할 수 있다는 가능성을 보여준다.

동D중의 경우 함수 및 기하 성취기준에 대해 3회에 걸쳐서 연속적으로 형성평가시스템을 활용하였다. 성취기준별로 수업은 교실에서 실시한 후 학생들이 컴퓨터실로 이동하여 20분가량 형성평가를 시행하고 결과를 확인하였다. 성취기준별로 수업이 완료된 직후 형성평가를 실시하여 결과를 확인하고, 다음 성취기준에 대한 교수학습을 진행하는 방식으로 진행하였는데, 이는 평가 후 시스템을 통해 즉시 제공되는 평가 결과를 기반으로 교사들이 학생 수준에 맞게 다음 수업을 준비할 수 있다는 것을 보여준다.

신B중은 컴퓨터실이 아닌 일반교실에서 태블릿 PC를 이용하여 형성평가를 시행하였다. 태블릿 PC를 활용하게 되면 일반교실 수업 상황에서 형성평가시스템과 같은 온라인 학습 시스템의 활용이 가능해진다. 신B중의 경우 시행 전에 10분 정도 평가내용을 교사와 함께 복습하고, 형성평가를 시행하는 시점에 태블릿 PC를 이용하여 형성평가시스템에 로그인 한 후 형성평가를 실시하였다. 학생들은 형성평가 실시 후 형성평가 결과를 바로 확인할 수 있어 학생들이 필요로 하는 적절한 시기에 피드백을 제공받을 수 있다는 것을 알 수 있다. 즉, 이처럼 태블릿 PC를 이용한 경우, 수업 시간 중에 활용하기 용이하고 평가 결과를 교사와 학생이 평가 시행 후 바로 확인할 수 있으며 이를 통해 적시에 교수학습을 개선하는 효과를 볼 수 있는 장점이 있다. 다만 태블릿 PC 사용을 위해서는 학교에 무선인터넷 시설 확보되어야만 하는데, 신B중의 경우 무선인터넷 시설이 갖추어져 있지 않아 시행 전에 연구진에서 egg를 이용하여 인위적으로 무선인터넷 환경을 조성한 후 형성평가를 시행하였다. 즉, 신B중의 사례를 통해 학생평가를 위한 시스템 개발에 있어서 다양한 학교 현장의 관련 제반 시설을 고려할 필요가 있음을 확인할 수 있었다.

오프라인으로 형성평가를 시행한 진C중의 경우 형성평가를 자유학기제의 수행평가로 활용하고자 하였다. 이에 1학년 1반∼11반까지 전 학년을 대상으로 이틀 간 359명의 학생이 형성평가시스템을 사용하였다. 이때 학교에서는 평가 결과를 성적 산출에 활용하기 위해 형성평가 평가 시행 전반에서 보안에 주의를 기울였다. 학생들은 종이로 인쇄된 검사지로 문제를 풀고, 문제지에 인쇄된 QR 코드를 자신이 가지고 있는 휴대폰으로 스캔하여 휴대폰 화면의 답안 입력 창에 답안을 입력하였다([그림 3] 참조]. 모든 학생이 평가에 참여할 수 있도록 휴대폰 사용이 어려운 학생에게는 태블릿 PC를 제공하였다. 평가 이후에 학생들은 태블릿 PC를 활용하여 함께 평가 결과를 확인하면서 문제에 대해 서로 논의하기도 하였다.

그림 3. 진C중에서 활용한 종이 검사지 일부 및 모바일 답안 입력 화면

Download Original Figure

형성평가시스템 적용을 종료한 후 학생들은 형성평가시스템에 대한 전반적인 사용 만족도, 평가 참여하기, 문제풀기, 평가 결과보기의 편의성, 형성평가시스템의 개선 사항에 관한 문항에 응답하였다. 먼저 형성평가시스템의 사용 전반에 대한 만족도를 묻는 문항에 대한 학생 설문 결과는 <표 3>과 같다. 5문항 모두 ‘매우 그렇다’에 응답한 비율이 가장 높았으며, 긍정 응답에 해당하는 ‘그렇다’와 ‘매우 그렇다’ 에 대한 응답 비율의 범위는 78.4%∼83.2%로 나타나 학생들이 대체로 형성평가시스템의 편의성이나 디자인에 만족하는 것으로 나타났다.

형성평가시스템의 하위 메뉴 중 온·오프라인에 따라 달라지는 답안 입력 방식의 편의성을 묻는 문항은 학생이 참여한 시행 방식에 따라 다르게 구성되어 있다. 답안 입력을 위한 온·오프라인 문제풀기 기능의 편의성을 묻는 문항에 대한 학생 응답 결과는 <표 4>와 같다.

문제풀기의 편의성에 대한 학생 응답을 살펴보면 ‘매우 그렇다’에 대한 응답 비율이 가장 높았고, ‘그렇다’와 ‘매우 그렇다’를 합한 긍정 응답 비율의 범위가 모든 문항에서 70% 이상으로 나타나 학생들의 만족도는 높은 것으로 나타났다. 온라인 시행의 경우 특히 이전 문제 돌아가는 기능의 유용성에 대해 ‘매우 그렇다’에 대한 응답 비율이 61.2%로 온라인 평가에서 이전 문제를 확인하는 기능에 대한 학생들의 만족도가 높은 것으로 나타났다. 오프라인 시행의 경우 QR 코드를 사용하는 것이 생소할 수 있었지만 긍정 응답이 81.3%로 나타나 학생들이 어렵지 않게 사용하였다는 것을 알 수 있었다.

형성평가를 시행하고 난 다음 평가 결과에 대한 결과가 시스템을 통해 자동 산출되며, 평가 결과보기 기능을 활용해 평가별 또는 성취기준별 진단 결과를 학생 개별적으로 확인할 수 있다. 현장 적용 과정에서 학생들은 모바일, 태블릿 PC, 컴퓨터를 통해 평가 결과를 온라인으로 확인하였다. 평가 결과보기 기능의 사용에 대한 전반적인 용이성과 평가별 및 성취기준별 결과보기 기능과 관련한 학생 만족도 조사 결과는 <표 5>와 같다. 평가별 결과보기에 관한 문항에 대해 긍정 응답에 해당하는 ‘그렇다’와 ‘매우 그렇다’에 대한 응답 비율의 범위가 79.4%∼82.8%이었으며, 특히 모든 문항에 대해 ‘매우 그렇다’의 응답 비율이 가장 높게 나타나 학생들이 결과보기 기능에 대한 만족도가 높은 것을 알 수 있었다.

교사들은 형성평가시스템 사용 경험을 바탕으로 형성평가시스템에 대한 전반적인 사용 만족도, 교사용 기능 만족도, 학생용 기능 만족도, 향후 활용을 위한 제안에 대한 설문을 작성하였다. 설문 결과, 대부분의 문항에 대해 긍정 응답(그렇다, 매우 그렇다)을 하였으며, 부정 응답(그렇지 않다, 전혀 그렇지 않다)을 한 경우는 없었다. 특히, 검사지를 구성할 때 문항 순서를 바꾸거나 다른 문항으로 교체하는 기능과 학급 및 학년별 결과보기 화면 구성 및 내용 이해의 용이성에 대한 만족도가 매우 높았다. 이처럼 형성평가시스템 자체의 사용 편의성은 높은 반면, 온라인 시행 또는 오프라인 시행 후 모바일 입력을 위한 학교의 인터넷 환경이 적절하게 마련되어 있지 않아 활용도가 낮아질 수 있다는 우려도 있었다.

또한 교사를 대상으로 수업 시간에 형성평가시스템을 활용하는 것이 교실에서의 교수학습, 학생의 자기주도적 학습, 자유학기제의 학생평가에 도움이 될 것이라 생각하는지를 조사하였다. 더불어 교수학습 과정에서 형성평가시스템을 효과적으로 활용할 수 있는 방안에 대한 의견도 조사하였다. 교수학습 측면에서 형성평가시스템의 활용에 관한 교사 설문 결과는 <표 6>과 같다. 교수학습 활동, 학생의 자기주도적 학습, 자유학기제의 학생평가에 대해 교사들은 ‘그렇다.’와 ‘매우 그렇다’를 선택하여 형성평가시스템이 교수학습 측면에서 긍정적인 역할을 할 수 있다고 보고 있음을 알 수 있다.

형성평가시스템이 교실에서의 교수학습, 학생의 자기주도적 학습, 자유학기제의 학생평가에 도움이 되는 이유에 대해 교사들이 응답한 결과는 <표 7>과 같다. 먼저 형성평가시스템이 교실에서 교수학습에 도움이 되는 이유는 채점이 쉽고, 피드백이 즉시적으로 이루어질 수 있다는 것이다. 즉, 형성평가시스템을 활용하게 되면 교사가 문제를 출제하거나 채점을 하는데 드는 시간을 줄일 수 있고, 학생들의 이해 정도를 더 정확하게 파악할 수 있으며 도움이 필요한 학생을 빠르게 파악하여 추가적인 도움을 줄 수 있다는 점에서 교수학습에 도움이 된다는 것이다.

다음으로 형성평가시스템이 학생의 자기주도적 학습에 도움이 될 것이라는 이유는 학생들에게 빠르게 피드백을 제공하고, 풀이와 관련된 내용을 제공하고, 유사한 수준의 문제가 여러 개 제시되고 있으며, 스스로 부족한 부분을 체크하고 문제를 풀어 볼 수 있는 기능이 있기 때문이라고 의견을 제시하였다.

마지막으로 자유학기제에 형성평가시스템이 유용할 것이라는 이유는 자유학기제에서 시험을 보지 않기 때문에 형성평가시스템을 활용하여 평가를 실시함으로써 학생들의 수준을 알 수 있고, 평가 내역이 저장되어 관리됨으로서 체계적으로 학습을 관리할 수 있고 학부모들도 학생들의 학습 상태를 파악할 수 있기 때문이라고 의견을 제시하였다. 또한 수준별 및 영역별 학습도움말이 개별 학생의 학습에 도움이 되고, 토론 수업과 접목시킬 수 있으며, 학생들의 성취수준을 명확하게 파악하여 생활기록부의 교과별 세부능력 및 특기사항란에 작성해줄 수 있기 때문에 자유학기제 평가를 지원할 수 있다는 의견을 제시하였다.