영어 글쓰기에 대한 ChatGPT와 원어민 교사의 피드백과 평가 비교 및 인식 연구 = A Comparative Study of Feedback, Assessment, and Learner Perceptions of ChatGPT and Native English Teachers in English Writing

국문 초록 (Abstract)

본 연구는 ChatGPT와 영어 원어민 교사가 대학생의 영어 글쓰기에 제공하는 피드백의 유사점과 차이점을 비교하고, 평가 결과의 차이를 분석하며, 이에 대한 학습자들의 인식을 조사하는 데 목적이 있다. 이를 위해 대학교의 교양 영어 과목을 수강한 27명의 대학생을 대상으로 영어 작문 과제를 수집하고, ChatGPT와 영어 원어민 교사 각각으로부터 받은 피드백 및 평가 결과를 비교하였다. 분석은 피드백의 유형, 오류 지적의 범위 및 내용, 평가 점수의 차이, 학습자의 인식 조사를 중심으로 이루어졌다. 연구 결과, ChatGPT는 내용, 조직, 언어 사용, 어휘 오류 등 다양한 측면에서 보다 광범위하고 세부적인 피드백을 제공한 반면, 원어민 교사는 언어 사용 오류에 중점을 제공하는 경향을 보였다. 평가 결과 분석을 통해, ChatGPT가 제공한 피드백을 기반으로 산출된 점수와 영어 원어민 교사들이 부여한 점수 간에는 내용 및 조직 영역에서 통계적으로 유의미한 차이가 나타났다. 또한 이러한 차이는 각 영역뿐만 아니라 최종 총점에서도 동일하게 확인되어, ChatGPT의 평가 경향과 원어민 교사의 평가 기준이 특정 측면에서 일관되게 다르다는 점을 시사한다. 학습자 인식 조사 결과, ChatGPT는 신속성과 반복 가능성 측면에서 긍정적인 평가를 받았으나, 맥락 이해 부족과 일부 부정확한 피드백에 대한 우려도 제기되었다. 반면, 원어민 교사의 피드백은 신뢰성과 개별 맞춤형 코멘트 측면에서 더 높은 만족도를 보였다. 본 연구는 인공지능 기반 피드백 도구의 보완적 활용 가능성과 한계를 함께 조명하며, 향후 효과적인 영어 글쓰기 피드백 방안 마련을 위한 기초 자료로 활용될 수 있을 것이다.

다국어 초록 (Multilingual Abstract)

This study aims to compare the similarities and differences between the feedback provided by ChatGPT and native English-speaking teachers on Korean university students’ English writing, to analyze the discrepancies in their evaluation results, and to examine learners’ perceptions of these feedback sources. To this end, English composition tasks were collected from 27 students enrolled in a general English course at a university, and the feedback and evaluation scores provided by ChatGPT and native English-speaking instructors were systematically compared. The analysis focused on feedback types, the scope and nature of error identification, differences in evaluation scores, and learners’ perceptions.
The findings revealed that ChatGPT offered broader and more detailed feedback across multiple dimensions—including content, organization, language use, and vocabulary—whereas native English-speaking teachers tended to place greater emphasis on language use errors. Statistical analysis further indicated significant differences between the scores generated based on ChatGPT’s feedback and those assigned by native English-speaking teachers, particularly in the content and organization domains. These discrepancies were also consistently observed in the overall scores, suggesting that the evaluation tendencies and criteria of ChatGPT differ from those of human raters in specific aspects.
Learner perception results showed that ChatGPT was positively evaluated for its speed and ease of repeated use, although concerns were raised regarding its limited contextual understanding and occasional inaccuracies. In contrast, feedback from native English-speaking teachers received higher ratings for its reliability and personalized commentary. This study highlights both the complementary potential and limitations of AI-based feedback tools and provides foundational insights for developing more effective feedback practices in English writing instruction.

목차 (Table of Contents)

• 1. 서론 1
• 2. 이론적 배경 7
• 2.1. 영어 글쓰기 피드백 7
• 2.1.1. 피드백의 역할과 종류 8
• 2.1.2. 피드백의 선행 연구 10
• 2.2. 영어 글쓰기 오류 유형 13
• 2.2.1. 오류 유형의 종류 14
• 2.2.2. 오류 유형의 선행 연구 18
• 2.3. ChatGPT(Chat Generative Pre-trained Transformer) 23
• 2.3.1. ChatGPT의 교육적 적용 23
• 2.3.2. ChatGPT와 영어 글쓰기 피드백, 평가 및 인식 선행 연구 27
• 3. 연구 방법 38
• 3.1. 연구 대상 38
• 3.1.1. 영어 작문 학습자 38
• 3.1.2. 영어 작문 피드백 및 평가 제공자 38
• 3.2. 영어 글쓰기 평가 도구 39
• 3.2.1. 영어 글쓰기 주제 39
• 3.2.2. 영어 작문 평가표 40
• 3.2.3. 오류 유형 42
• 3.2.4. 피드백 유형 44
• 3.3. 피드백 인식 조사 설문지 45
• 3.4. 연구 절차 46
• 4. 연구 결과 48
• 4.1. ChatGPT와 영어 원어민 영어 글쓰기 피드백의 유사점 및 차이점 48
• 4.2. ChatGPT와 영어 원어민의 영어 글쓰기 평가 점수 비교 60
• 4.3. ChatGPT와 원어민 영어 글쓰기 피드백 인식 조사 67
• 5. 결론 81
• 참고문헌 85
• 부록 91
• Abstract 98