요인 분석을 통한 쓰기 평가의 준거 설정에 대한 연구 = Study on Establishing Criteria for Writing Evaluation through Factor Analysis

다국어 초록 (Multilingual Abstract)

This study starts with the need for the criteria of writing evaluation that provides the useful basis for judgement in writing class. Questioning the existing writing evaluation that has been conducted based on writing theory, this study aims at establishing a reasonable criteria for writing evaluation by supplementing theories on measurement and evaluation as well as writing theory.
In this study, we defined the concepts of criteria for writing evaluation as 'concepts or attributes' of target of evaluation and examined the existing evaluation criteria for writing that focuses on three aspects such as content, structure and expression. Based on this examination, we established a new criteria for writing evaluation (draft) after taking into account the existing criteria for writing evaluation and responses by those who are currently involved in Korean language education. Further, in order to secure representation in items, we asked specialists of writing evaluation to determine appropriateness of the criteria for writing evaluation (draft). After revising the criteria for writing evaluation (draft), we secured credibility on the draft by carrying out a preliminary test on 30 teachers in Seoul. Thereafter, in the main test, we did stratified sampling in two stages by school grade and district size, and asked respondents to evaluate its importance. The respondents consisted of elementary school teachers and Korean language teachers at secondary schools.
In this study, in an effort to establish the criteria for writing evaluation based on the materials collected in this way, we conducted a confirmatory factor analysis through exploratory factor analysis and structural equations model. After carrying out statistical testing, we identified each of the criteria for writing evaluation as follows:
First of all, we established appropriateness of topics, feasibility of arguments and reasons, appropriateness of expression and systematic structure and consideration of readers as the evaluation criteria for persuasive writing. In addition, when it comes to the evaluation criteria for informative writing, we included appropriateness and credibility of information on subjects to explain, systematic structure, appropriateness of expression and consideration of readers. As for the evaluation criteria for expressive writing, we established pleasure to readers, expression of writers' values, organized structure, unique expression, creative content and credible content. In addition, we presented the relationship between writers and readers, friendly expression, clarity of content and appropriateness of expression as the criteria of writing for relationship.
In light of these results, we can confirm that the criteria for writing evaluation varies depending on the purpose of writing. Therefore, when we apply the criteria for writing evaluation for students, it is desirable for us to utilize each criteria specified in this study depending on the purpose of communication. Given the fact that the structure of writing was established as a common key evaluation criteria regardless of the purposes of writing, we can confirm that the structure of writing is an essential important criteria for students to learn.
The most noticeable feature of the evaluation criteria in this study is the factor 'consideration of readers'. Despite of the importance of readers who will read articles, it is very rare that the factor of readers is provided as the evaluation criteria. This study is significant in that it raised awareness on the criteria for writing evaluation based on the performance of the existing writing theory. In addition, when it comes to expression, this study drew a conclusion that it is more reasonable to carry out the writing evaluation based on appropriateness rather than accuracy that was emphasized before.
Such evaluation criteria established in this study can be helpful in evaluating students' writing as follows. First of all, the writing evaluation criteria can provide detailed methods and tools to properly collect the information for evaluating students' writing, and offer a meaningful indicator to interpret the information on students' writing collected from the evaluation.
In addition, the information of students' writing gained from the evaluation criteria can be utilized for diverse purposes depending on when decision-making is required. Therefore, the evaluation can be not only a tool to measure students' achievement levels, but also a useful strategy for writing class. The criteria specified in this study can be used as a strategy for writing class that offers meaningful information to both students and teachers in overall writing classes.

국문 초록 (Abstract)

이 연구는 쓰기 평가의 준거가 쓰기 수업에 가치 있는 판단의 근거를 제공해야 한다는 필요성에서 출발한다. 그리하여 이 연구는 그간의 쓰기 평가가 쓰기 이론에 근거하여 수행되었다는 데에 문제의식을 갖고 쓰기 이론뿐만 아니라 측정․평가 이론을 보완하여 타당한 쓰기 평가 준거를 설정하는 것을 목적으로 한다.
이 연구에서는 쓰기 평가 준거의 개념을 ‘평가하려는 것의 개념 혹은 속성’으로 정의한 후, 쓰기 평가의 준거를 내용, 조직, 표현의 세 측면에서 다루고 있는 기존의 쓰기 평가 준거에 대해서 살펴보았다. 이러한 탐색을 토대로 이 연구에서는 쓰기 평가 준거(안)을 기존의 쓰기 평가 준거와 현재 국어교육에 참여하는 참여자들의 반응을 참조하여 제작하였다. 또한, 문항의 대표성을 확보하기 위해 쓰기 평가의 전문가를 대상으로 하여 쓰기 평가 준거(안)의 적절성을 판별하게 하였다. 이렇게 수정된 쓰기 평가 준거(안)은 서울 지역 교사 30명을 대상으로 하여 예비 검사를 통해 신뢰도를 확보하였다. 그 후, 표본 조사에서는 학교 급별, 지역 규모별로 2단계 유층 표집하여 응답자에게 중요도를 평정하게 하였다. 이때의 응답자는 초등학교 교사와 중등학교 국어 교사를 대상으로 하였다.
이 연구에서는 이와 같은 방식으로 수집된 자료를 토대로 쓰기 평가의 준거를 설정하기 위하여 탐색적 요인 분석과 구조방정식 모형을 통한 확인적 요인 분석을 실시하였다. 통계적 검증의 결과, 이 연구에서 설정된 각각의 쓰기 평가 준거는 다음과 같다.
우선, 설득적 쓰기의 평가 준거로는 주제의 적절성, 주장과 근거의 타당성, 표현의 적절성, 구조의 체계성, 독자에 대한 고려가 설정되었다. 또한, 정보 전달적 쓰기의 평가 준거로는 설명하고자 하는 대상에 대한 정보의 적절성과 신뢰성, 구조의 체계성, 표현의 적절성, 독자에 대한 고려가 설정되었다. 그리고 정서 표현적 쓰기의 평가 준거로는 독자에게 주는 즐거움, 필자의 가치관 표현, 구조의 유기성, 개성적인 표현, 내용의 창의성, 내용의 진실성이 설정되었다. 마지막으로, 친교적 쓰기의 평가 준거로는 필자와 독자의 관계, 호의적인 표현, 내용의 명료성, 표현의 적절성이 설정되었다.
이와 같은 결과로 미루어 볼 때에, 쓰기 평가 준거는 쓰기의 목적에 따라 상이하게 나타난다는 사실을 확인할 수 있다. 따라서 학생들에게 쓰기 평가를 적용할 때에는 의사소통의 목적에 따라 이 연구에서 설정된 이와 같은 각각의 평가 준거를 활용하는 것이 바람직하다. 또한 글의 구조라는 측면은 쓰기의 목적과 관련 없이 공통적으로 중요한 평가 준거로 설정되었다는 사실을 통해 글의 구조는 학생들이 반드시 학습해야 할 중요한 준거임을 확인할 수 있었다.
이 연구에서 설정된 평가 준거로 가장 특징적인 부분은 독자에 대한 고려라는 평가 준거이다. 필자의 글을 읽게 될 독자의 중요성에도 불구하고 그간 독자라는 요인이 평가 준거로 도출되는 것은 드문 일이었다. 이 연구는 이러한 점에서 기존의 쓰기 이론의 연구 성과를 토대로 쓰기 평가 준거에 대한 인식을 새롭게 확장시켰다는 데에 의의가 있다. 또한, 표현의 측면에 있어서도 기존에 강조되었던 정확성의 개념보다 적절성의 개념으로 접근하는 것이 타당하다는 결과를 도출하였다.
이 연구에서 설정된 이와 같은 평가 준거는 학생의 쓰기 평가에 다음과 같은 도움을 제공할 수 있다. 우선, 쓰기 평가 준거는 학생의 쓰기에 대한 평가 정보를 제대로 수집하기 위한 상세화된 방법과 도구를 제공할 수 있으며, 평가를 통해 수집된 학생의 쓰기에 대한 정보를 해석하는 데에 의미 있는 지표를 제공할 수 있다.
또한, 평가 준거를 통해 수집된 학생의 쓰기에 대한 정보는 언제 어느 시점에서 의사결정이 요구되는가에 따라 다양하게 나누어 활용할 수 있다. 따라서 평가는 학생들의 성취 수준을 가늠해 보기 위한 수단이기도 하지만 동시에 유용한 수업 전략이 될 수 있다. 이 연구에서 설정된 쓰기 평가 준거는 쓰기 수업 전 과정에서 교사와 학생에게 의미 있는 정보를 제공하는 수업 전략으로도 활용 가능하다.

목차 (Table of Contents)

• Ⅰ. 서론 1
• 1. 연구의 필요성 및 목적 1
• 2. 연구 문제 6
• Ⅱ. 쓰기 평가의 개념과 방법 9
• 1. 쓰기의 개념 9
• 2. 쓰기 평가의 개념 19
• 1) 측정과 평가 19
• 2) 쓰기 평가의 개념 22
• 3. 쓰기 평가의 방법 26
• 1) 과정 평가 27
• 2) 결과 평가 35
• Ⅲ. 쓰기 평가 준거의 개념과 구성 요인 42
• 1. 쓰기 평가 준거의 개념 42
• 2. 쓰기 평가 준거 관련 선행 연구 검토 45
• 3. 쓰기 평가 준거의 구성 요인 64
• 1) 글의 내용 65
• 2) 글의 조직 68
• 3) 글의 표현 71
• Ⅳ. 쓰기 평가 준거 설정 방법 74
• 1. 이론적 탐색 및 자료 수집 74
• 2. 전문가 평정 및 표본 조사 77
• 3. 통계적 검증 80
• Ⅴ. 쓰기 평가의 준거 설정 결과 분석 및 해석 86
• 1. 설득적 쓰기의 평가 준거 87
• 1) 탐색적 요인 분석과 신뢰도 분석 88
• 2) 확인적 요인 분석 92
• 2. 정보 전달적 쓰기의 평가 준거 96
• 1) 탐색적 요인 분석과 신뢰도 분석 96
• 2) 확인적 요인 분석 100
• 3. 정서 표현적 쓰기의 평가 준거 105
• 1) 탐색적 요인 분석과 신뢰도 분석 105
• 2) 확인적 요인 분석 109
• 4. 친교적 쓰기의 평가 준거 114
• 1) 탐색적 요인 분석과 신뢰도 분석 114
• 2) 확인적 요인 분석 118
• 5. 쓰기 평가 준거에 대한 결과 해석 123
• 1) 쓰기의 목적 123
• 2) 글의 구조 126
• 3) 독자에 대한 고려 130
• 4) 표현의 적절성 135
• Ⅵ. 결론 138
• 참고 문헌 143
• Abstract 157