국사과 독서수행평가의 타당성 연구

국문 초록 (Abstract)

수행평가가 다양한 능력이나 기술을 측정할 수 있다면 수행평가에 의한 학습자들의 점수는 의도한 능력과 기술로서 해석되어야 한다. 즉 항상 수행평가라는 용어 자체가 곧 ‘타당하다’는 의미는 아니다. 수행평가의 과제는 선택형 검사의 문항에 비해 고등정신 능력을 더 타당하게 측정하고, 실생활에 더 가까우며, 학생들에게 정보를 종합하고 어떠한 것을 산출해 내도록 요구하여, 최종 산출물뿐 아니라 그 과정까지도 평가한다고 주장되고 있다.
그러나 이러한 주장들은 증거를 가지고 지지되어야 한다. 즉 선택형 위주의 성취도 검사에 비해서 새로운 검사의 형태가 어떤 측면에서 장점이 있다고 주장되어도 일정한 측정학적인 준거들을 충족해야 하며, 이것은 모든 형태의 측정이 갖추어야 할 상식에 속한다.
수행평가 또한 학습자의 능력을 측정하고자 고안된 도구이기 때문에 모든 형태의 측정이 갖추어야 할 준거를 충족해야 한다. 증거를 제시하지 않은 수행평가의 장점을 그대로 신뢰할 수는 없을 뿐 아니라 수행평가가 복잡한 구조로 만들어졌다고 해서 학습자의 복잡한 능력이나 기술을 측정할 수 있다는 것을 의미하는 것은 아니기 때문이다. 따라서 이 연구의 목적은 국사수행평가에서 많이 실시되고 있는 독서수행평가의 타당성을 알아보는 것이다.
본 연구에서는 전통적 개념의 타당도 중에서 공인타당도에 근거하여 선다형 지필평가인 중간고사 점수를 준거로 2가지 가설을 세워보았다.
첫째, 국사수행평가의 타당도는 범위가 넓고 주제가 다양한 과제보다는 국사과 교육과정에 좁고 세세한 관련이 있을 때 타당도가 높다는 가설이다. 이를 위해 국사단원목표에 근거하여 구조화시킨 독서수행평가의 경우 지필평가와의 상관관계가 높게 나타나지만 광범위하게 역사를 인식하는 과정을 중요시하는 포트폴리오 평가의 경우는 지필평가와의 상관관계가 낮게 나타난다는 가설이다. 이를 위해 수행평가와 가장 근접하게 실시하는 중간고사 점수를 준거점수로 하여 독서수행평가와 포트폴리오 평가의 상관관계를 분석하는 공인 타당도를 확인해 볼 것이다.
둘째, 독서수행평가 실시 이후 독서수행평가의 성적을 상, 중, 하의 세 그룹으로 나누었을 때 ‘상’그룹의 학생들이 수행평가와 관련 있는 지필평가문항의 정답률이 높게 나올 것이라는 가설이다. 이를 위해 중간고사와 상관관계가 높은 독서수행평가를 충실히 수행해서 높은 점수를 받은 ‘상’그룹의 학생들의 독서수행평가 관련 4문항에 대한 정답률 분석을 할 것이다. 또한 이 연구를 통해서 타당도를 확보하기 위한 평가도구를 어떻게 마련할지에 대한 시사점을 도출해 볼 것이다.
구체적으로 독서수행평가를 기존의 보고서법의 형태와 결합하여 실시방법과 채점기준을 마련하여 평가를 실시하였고, 여기서 얻어진 결과 점수를 토대로 다음과 같은 통계처리 과정을 거쳤다.
첫째, 응답자의 반별분포, 독서수행평가, 포트폴리오 평가 점수 분포를 알아보기 위해 빈도분석을 실시하였다.
둘째, 독서수행평가, 포트폴리오 평가, 두 평가의 합산점수 및 중간고사의 기술통계량 분석을 실시하였다.
셋째, 독서수행평가와 포트폴리오 평가의 중간고사와의 상관관계 분석을 실시하였다.
넷째, 독서수행평가 성적을 ‘상’, ‘중’, ‘하’의 세 그룹으로 나누어, 독서수행평가와 관련하여 출제한 중간고사의 4문항에 대해서 그룹에 따라 수행평가가 반영된 중간고사 4문항의 정답률 차이를 알아보기 위해 교차분석을 실시해 카이검증하였다.
다섯째, 본 연구의 실증분석은 모두 유의수준 5%에서 검증하였으며, 통계처리는 SPSSWIN 12.0 프로그램을 사용하여 분석하였다.
조사 결과 다음과 같은 결과가 나타났다.
첫째, 독서수행평가와 중간고사와의 상관관계 분석을 실시한 결과 독서수행평가 점수와 선다형 지필고사인 중간고사와의 상관관계는 매우 높은 양의 상관을 보여(r=0.723, p<.001), 독서수행평가는 수행평가로서의 공인타당도를 확보하였다. 이는 독서수행평가가 학습목표에 따라 수업을 설계하고 그 과정에서 다루어진 내용을 학생들이 관련도서를 통해 확인하고 주어진 제시문항에 따라 체계적으로 역사적 사실을 접하고 이해해나가는 과정을 수행했고, 관련 내용이 중간고사에서 같은 범위로 다루어져서 학생들에게 많은 도움이 되었기 때문이다. 즉, 타당도를 높이기 위하여 세부적이고 좁게 단원에 밀접한 과제를 설정하였기 때문으로 보인다. 반면 포트폴리오 평가와 선다형 지필평가인 중간고사의 상관관계는 다소 낮은 양의 상관(r=0.264, p<.001)을 보였다. 포트폴리오 평가는 학생의 성실한 노력을 점검하는 수행평가로서 이는 포트폴리오 평가가 어느 정도 다른 요소들(성실성, 인내심, 표현력, 시간관리능력)을 측정하기 때문이다. 또한 포트폴리오 평가는 학생들의 전반적인 역사인식을 알아보기 위한 평가로 단원에 근접하기 보다는 넓고 다양한 주제에 대한 과제였기 때문으로 보인다. 따라서 타당도를 확보하기 위한 평가도구를 어떻게 마련할지에 대한 시사점을 도출하였다고 볼 수 있다.
둘째, 독서수행평가점수가 높은 상위그룹 아이들이 중간고사에서 독서수행평가 관련문항 정답률이 높았고, 독서평가점수가 낮은 하위그룹 아이들이 관련문항 정답률이 낮은 결과가 나왔다. 독서수행평가 이후 단원의 내용을 잘 이해했기 때문에 중간고사에 영향력을 주어 평가 문제를 잘 풀었다고 볼 수 있다.
이러한 조사결과를 토대로 수행평가에 대해서 다음과 같은 개선 방안을 제시하고자 한다.
첫째, 수행평가의 타당도에 관한 기본 자료들이 많이 축적되기 위해 많은 연구가 보다 활발하게 이루어져야 한다.
둘째, 타당성을 입증 받은 많은 수행평가 방안들이 보급되어 실제 학교에 적용될 수 있어야 한다.
셋째, 학교 현장에서 수행평가를 쉽게 이용할 수 있도록 하기 위해 학년ㆍ교과ㆍ단원별 평가기준과 방법이 만들어져야 하며, 아울러 다양한 수행평가 방법 및 결과 분석 방법의 개발이 병행되어야 할 것이다.
넷째, 연구한 독서수행평가가 타당성을 갖게 된 것은 타당성을 갖기 위한 조건을 갖췄기 때문이다. 따라서 수행평가를 교육 현장에서 적용할 때에는 교육과정과 교육목표에 의거하여 실시되어야 할 것이다.

목차 (Table of Contents)

• Ⅰ. 서론 1
• Ⅱ. 이론적 배경 7
• 1. 수행평가의 개념 7
• 2. 국사과 수행평가 10
• 가. 국사과 수행평가 10
• 나. 국사과 수행평가의 유형 12
• 다. 국사과 수행평가에 대한 선행연구 15
• 3. 수행평가의 타당도 18
• 가. 타당도의 개념 18
• 나. 타당도의 검증 19
• 다. 타당도 개념의 새로운 경향 24
• 라. 수행평가의 타당도 26
• Ⅲ. 연구방법 및 설계 31
• 1. 연구대상 및 설계 31
• 2. 측정 도구 32
• 가. 선다형 지필 평가 방법 32
• 나. 독서수행평가 방법 38
• 다. 포트폴리오 평가 방법 47
• Ⅳ. 분석 및 연구 결과 52
• 1. 자료분석 52
• 2. 연구결과 60
• Ⅴ. 결론 및 제언 62
• 참고문헌 64
• 부록 67
• Abstract 88