컴퓨터 기반 국가수준 학업성취도 평가(eNAEA) 도입을 위한 출제 방안 연구 (RRE 2020-5)|RISS 상세보기

국문 초록 (Abstract)

본 연구는 지능정보사회로의 진입 및 교육과정 개정 등을 포함한 국가·사회적 변화와 정책적 요구에 부응하여, 2022년 컴퓨터 기반 학업성취도 평가(eNAEA) 전면 시행이라는 정책 현안에 성공적으로 대응하는 것을 목적으로 eNAEA의 출제 방안을 연구하였다. 이를 위해 컴퓨터 기반 평가로의 안정적인 전환 전략을 모색하여 출제 방향을 설정하였다. 또한 새로운 평가 문항 유형을 탐색·설정하여 예시 문항을 개발하고 컴퓨터 기반 평가에 따른 출제 방안을 제시하였다. 이러한 연구 결과를 바탕으로 향후 효과적인 학교교육 혁신과 학생 평가 지원 및 eNAEA의 지속적 발전을 위한 정책에 관하여 제언하였다.
본 연구의 주요 연구 결과를 요약하여 정리하면 다음과 같다. 먼저, 국제 및 국외 학업성취도 평가가 지필평가에서 컴퓨터 기반 평가로 전환한 사례 및 관련 선행연구 분석을 통해 컴퓨터 기반 학업성취도 평가의 출제 방향을 설정하였다. PISA, TIMSS, NAEP, NAPLAN에서의 전환 과정을 개괄함으로써, 문항 개발 및 검사지 구성 등을 면밀하게 준비해야 하며, 적절한 기술공학적 기능 활용으로 교과역량에 대한 평가적 성격을 강화할 수 있음을 확인하였다. 또한 선행연구를 분석하여 혁신적 문항 도입에 따른 평가 구인 개선, 학생의 평가 참여 의욕 및 편의 개선 등의 기회 요소와 평가 타당도 개선 입증 문제, 시행 비용 상승 및 관리 요소 증가 등의 위험 요소를 도출하였다. 컴퓨터 기반 평가로의 전환 전략으로는 변혁적 전략을 논의하면서 전환에 따른 기회 요소와 위험 요소를 종합적으로 고려하는 정책적 의사결정이 필요함을 확인하였다. 이상을 바탕으로 교육과정의 질 점검이라는 학업성취도 평가의 목적에 부합하며 문항에서 측정하는 구인과 기술공학적 기능 활용 목적이 명확한 평가 도구 마련, 기술공학적 기능 활용 측면에서 다양한 상호작용성을 지향하고 학생의 수용 가능성을 고려한 평가 도구 마련, 교과별로 전형적이며 학교 현장에 적용 가능한 문항의 개발, 자동채점의 활용성이 높은 구성형 문항의 개발, 안정적 시행 가능성을 고려한 문항 개발 및 검사지 구성으로 eNAEA의 출제 방향을 설정하였다.
다음으로, eNAEA의 문항 유형을 모색하기 위해 선행연구와 대규모 컴퓨터 기반 평가에 도입된 기술공학적 기능 및 문항 유형을 검토하였다. 문항에 대한 학생의 응답 방식이 유형화의 주요 기준으로 활용됨을 참고하되, 교과역량을 중시하는 학업성취도 평가의 성격을 고려하여 자료 탐색 활동 관련 기능까지 고려하여 문항을 유형화하고, 교과별 활용도를 타진하였다. eNAEA에 적합한 문항 유형으로, 학생 응답 측면에서의 문항 유형은 기술공학적 기능과 응답 방식의 특징을 중심으로 선택형 범주와 구성형 범주로 대별하였다. 선택형 범주로는 기존 지필평가 유형인 ‘선다형’뿐 아니라, ‘확장 선택형’, ‘자료 연결형’, ‘순서 배열형’을 설정하였고, 구성형 범주로는 ‘단답형’, ‘서술형’, ‘수정형’, ‘그래프/그림 완성형’을 설정하였다. 자료 탐색 측면에서의 문항 유형은 기존 지필평가와 유사한 ‘단순 제시형’ 외에도 ‘정보 활용형’, ‘미디어 활용형’, ‘도구 조작 및 시뮬레이션형’, ‘대화형’을 새롭게 설정하였다. 이상 eNAEA에서 새롭게 설정한 문항 유형에 대해 기술공학적 기능과 문항의 복잡성을 고려하여 단기, 중기, 장기에 이르는 3단계의 적용 계획을 수립하였다.
eNAEA 체제에서의 문항 유형에 대한 연구와 더불어 eNAEA 평가틀 및 검사지 구성 방안과 문항 개발 방안에 대한 연구를 수행하였다. 컴퓨터 기반 평가에서는 2015 개정 교육과정에 따른 학업성취도 평가의 평가틀을 준용하되, ‘역량’ 요소를 재점검하여 eNAEA의 평가틀을 확정하였다. 확정된 평가틀을 바탕으로, 2020 본시행 지필평가의 일부 문항을 컴퓨터 기반으로 전환한 문항과 역량 평가 측면을 강화한 신규 개발 문항으로 이루어진 교과별 eNAEA 예비시행 검사지를 구성하였다. 이러한 과정에서 향후 본시행의 검사지 구성에 대한 유의미한 시사점을 도출하였다. 즉, 교과별 적정 문항 수, 문항당 최대 배점과 배점 부여의 원칙, 검사지 전체의 적정 난이도를 유지하는 방안, 복합형 문항에 대한 재검토와 세트형 문항의 적정 비율, 검사지 내 문항 배치 순서에 대한 점검 등에 대한 추가 논의가 필요함을 확인하였다.
각 교과의 성취기준이나 교과역량을 적절히 평가할 수 있는 eNAEA 문항 유형별 예시 문항을 소개하고, 문항 개발 시 유의해야 할 사항에 대해 살펴보았다. 2020년 학업성취도 평가에서의 전환 문항 분석 결과에 기반하여 문항 유형 각각에 적용 가능한 교과별 성취기준 및 교과역량을 탐색하고, 해당 문항 유형을 활용할 때의 이점과 문항 출제 시 유의점 등을 분석하였다. 뿐만 아니라 문항 유형을 활용한 예시 문항을 제시함으로써 문항 유형에 대한 이해를 돕고, 추후 문항 개발 시 참조점이 되도록 하였다.
새로운 컴퓨터 기반 학업성취도 평가 체제에서 문항 개발 절차를 설정하고 문항 개발 방안에 대해서도 탐색하였다. 컴퓨터 기반 평가 출제 절차에서는 지필평가와 달리, 문제은행 시스템에 최종 완성된 문항을 저장하는 문항 탑재 단계와 검사지 구성 계획에 따라 문제은행 시스템에서 원하는 형태와 종수의 검사지를 추출하여 구성하는 단계가 요구되는 특징이 있다. 문항 개발 방안은 ‘합숙형’과 ‘공모형’으로 구분하여 장단점을 분석한 결과를 바탕으로 eNAEA에서는 합숙형과 공모형의 결합 형태로 운영할 때 가장 효과적일 것으로 판단하였다. 컴퓨터 기반 평가가 안착하는 과정에서 단기적으로 팀운영제와 문항공모제를 병행하고, 추후 운영 결과에 대한 검토를 바탕으로 문항 공모의 비중을 단계적으로 늘리는 방안을 논의하였다.
본 연구를 통해 얻은 시사점을 바탕으로 ‘eNAEA 시스템을 활용한 학교교육 혁신과 학생 평가 지원’, ‘eNAEA 체제 개선 지원’이라는 두 측면에서 6가지 정책 제언과 그에 따른 실행 전략을 제시하였다. 먼저 ‘eNAEA 시스템을 활용한 학교교육 혁신과 학생 평가 지원’과 관련한 제언은 eNAEA 시스템을 활용하여 학교 평가를 지원할 수 있는 방안을 강구한 것이며 이는 본 연구의 활용 및 성과 확산과 관련된다. 이와 관련된 정책 제언으로 ‘1. eNAEA 시스템을 활용한 학교와 학생 중심의 혁신적 학업성취 평가 서비스 제공’, ‘2. 학교 단위 컴퓨터 기반 평가 플랫폼(e-평가플랫폼) 개발 및 보급’, ‘3. 평가 환경 변화에 따른 교사의 평가 역량(e-평가전문성) 강화’를 제시하였다. 다음으로 ‘eNAEA 체제 개선 지원’ 관련 제언은 국가수준 학업성취도 평가가 eNAEA 체제로 안착하기 위한 출제, 시행, 연구 등에 관한 것으로서 학업성취도 평가의 지속적 발전을 도모할 수 있는 내실화 방안을 제안한 것이다. 이에 대한 정책 제언으로 ‘4. 평가의 타당도 및 사용자 편의성 제고를 위한 eNAEA 출제 및 시행 시스템 고도화’, ‘5. eNAEA의 안정적 시행을 위한 제반 환경 구축’, ‘6. eNAEA의 평가 타당도 및 역량 평가 실효성 제고를 위한 기초 및 심층 연구 지원’을 제시하였다.

번역하기

본 연구는 지능정보사회로의 진입 및 교육과정 개정 등을 포함한 국가·사회적 변화와 정책적 요구에 부응하여, 2022년 컴퓨터 기반 학업성취도 평가(eNAEA) 전면 시행이라는 정책 현안에 성공...

목차 (Table of Contents)