학문 목적 한국어 말하기 평가 도구 개발의 쟁점과 과제 = Issues in the development of Korean speaking test for academic purposes

다국어 초록 (Multilingual Abstract)

This paper examines recent approaches to developing speaking tests and in particular the testing of Korean speaking for academic purposes. The first approach is concerned with testing theory of the language for specific purposes (LSP) and Korean for academic purposes (KAP) as a means of verifying the claims for speaking test development. The second approach is analyzing the validation procedures of TOEFL and IELTS as representative academic speaking tests and relating them to the development of Korean speaking tests for academic purposes. The article argues that the development of Korean speaking tests for academic purposes is founded on the conceptual framework of speaking tests, construct setting, item writing, connecting testing method and validation, scoring rubric and rating scale development, and consideration of educational washback and impact. From this view point, developing Korean speaking tests for academic purposes can be justified in terms of practical needs analysis, construct validity projects, circumstantial specification, and rater effect analysis, and it is suggested that continuous concurrent and predictive validation research be conducted to improve speaking tests.

국문 초록 (Abstract)

본 연구는 학문 목적 한국어 말하기 평가의 도구의 개발과 관련한 주요 쟁점과 과제를 제시하는 것을 목적으로 한다. 이를 위해 먼저 학문 목적 말하기 평가를 구성하는 이론적 배경으로서 특수 목적 언어 평가 연구와 학문 목적 한국어 말하기 교육, 그리고 학문 목적 한국어 말하기 평가에 관한 연구들을 검토하였다. 그리고 대표적인 국외 학문 목적 말하기 시험을 실시하고 있는 TOEFL과 IELTS에서 말하기 시험이 개발되어 현재의 모습으로 사용되기까지의 과정을 살펴보고, 이를 통해 학문 목적 한국어 말하기 평가 도구 개발에 관한 시사점을 도출하였다. 이상의 논의를 바탕으로 학문 목적 한국어 말하기 평가 도구 개발의 쟁점으로 제시한 것은 평가의 개념 정립과 구인 설정, 평가 과제 개발, 평가 방법 선택 및 타당화, 채점과 척도 개발, 교육적 환류와 영향력이다. 끝으로 학문 목적 한국어 말하기 평가 도구의 개발을 위한 앞으로의 과제로서 개발 과정에서 응시 목적을 고려하여 요구 분석을 실시하고, 구인타당도 확보와 면밀한 평가 계획서 작성, 그리고 채점자 분석 연구의 필요성을 강조하고, 예측타당도와 공인타당도 연구를 통해 학문 목적 한국어 말하기 평가 도구의 안정화와 품질 개선 작업이 지속적으로 이루어져야 함을 제안하였다.

참고문헌 (Reference)

1 윤희원, "해외 대학의 비모어 화자 대학(원)생을 위한 언어 지원 사례 연구 -프랑스 파리 3대학, 7대학과 영국 서리 대학을 중심으로-" 국어교육연구소 (29) : 389-413, 2012

2 윤희원, "한국어능력시험(TOPIK) 개선 방안 연구" 한국교육과정평가원 2010

3 김정숙, "한국어능력시험 체제 개선 연구" 국립국제교육원 2010

4 강현주, "한국어 말하기 평가의 구인으로서 상호작용능력 연구" 고려대학교 대학원 2013

5 박자영, "한국어 말하기 평가 설계를 위한 시험 입력물 연구" 배재대학교 2016

6 "한국 영국문화원 홈페이지"

7 김정숙, "학문적 목적의 한국어 교육과정 설계를 위한 기초 연구: 대학 진학생을 위한 교육과정을 중심으로" 국제한국어교육학회 11 (11): 1-19, 2000

8 심재경, "학문 목적 한국어능력시험 개발을 위한 기초 연구 : 국외 학문 목적 외국어능력시험 분석을 중심으로" 고려대학교 교육대학원 2014

9 권순용, "학문 목적 한국어 학습자의 말하기 평가 도구 개발 연구" 부경대학교 2015

10 김상경, "학문 목적 한국어 학습자의 말하기 능력 평가 방안 연구" 경희대학교 2015

11 박광진, "학문 목적 한국어 학습자 대상 교실 말하기 평가 방안 연구" 배재대학교 대학원 2010

12 한상미, "학문 목적 한국어 말하기 평가 연구 －대학 입학 전 과정을 중심으로－" 국제한국어교육학회 20 (20): 207-238, 2009

13 박선윤, "학문 목적 한국어 말하기 평가 도구 개발 방안" 중앙대학교 2015

14 김상경, "학문 목적 한국어 말하기 평가 과제 유형 개발 연구 - 다국면 라쉬 모형과 일반화가능도 이론 적용을 중심으로 -" 한국국어교육학회 (100) : 115-141, 2014

15 윤신애, "학문 목적 한국어 듣기·말하기 필요 분석 연구 : 외국인 유학생과 한국어 교사를 대상으로" 이화여자대학교 교육대학원 2008

16 최정순, "학문 목적 한국어 교육의 교육과정과 평가" 이중언어학회 (31) : 277-314, 2006

17 송지현, "학문 목적 한국어 교육을 위한 과제 중심 요구 분석" 이화여자대학교 대학원 2006

18 황현주, "학문 목적 한국어 교육과정 개발을 위한 과제 단위 요구 분석 : 중국인 유학생을 대상으로" 연세대학교 교육대학원 2006

19 이해영, "학문 목적 한국어 교과과정 설계 연구" 국제한국어교육학회 15 (15): 137-164, 2004

20 지현숙, "인터뷰 시험 담화 분석을 통한 한국어 구어 능력 평가" 서울대학교 국어교육연구소 16 : 79-104, 2005

21 이덕희, "요구 분석을 통한 학문 목적의 한국어 교육과정 설계 연구" 연세대학교 교육대학원 2004

22 민진영, "외국인 유학생의 한국어 능력 부족에 따른 대학원 생활 경험 연구" 한국다문화교육학회 7 (7): 159-181, 2014

23 나임순, "외국인 유학생의 문화적응 스트레스와 생활 스트레스에 미치는 영향" 한국비영리학회 5 (5): 159-197, 2006

24 서동선, "외국인 유학생을 위한 대학 수학 목적 한국어능력 평가 방안 연구" 경희사이버대학교 2015

25 유해준, "외국인 유학생을 위한 대학 교양 한국어 교재 개발 방안" 한국사고와표현학회 8 (8): 73-106, 2015

26 "영국 케임브리지 대학 영어 평가원(Cambridge English Language Assessment) 홈페이지"

27 최정순, "연구 동향 분석을 통해 본 학문 목적 한국어교육 연구의 실태와 제언" 어문연구학회 74 : 131-156, 2012

28 김수경, "소리내어 읽기 말하기 평가과제의 구인타당도 연구" 이화여자대학교 대학원 2012

29 민병곤, "성인의 국어 말하기 능력 평가 결과 분석" 한국화법학회 (24) : 101-136, 2014

30 "미국 교육평가원(Educational Testing Service, ETS) 홈페이지"

31 "국제영어능력시험(International English Language Test System, IELTS) 홈페이지"

32 욱건화, "과업 기반 학문목적 한국어 말하기 교육의 설계 연구" 인천대학교 대학원 2014

33 박선옥, "學問 目的 韓國語 말하기 敎材 分析을 통한 敎材 開發 방향 연구" 한국어문교육연구회 37 (37): 381-408, 2009

34 Enright, M, "Validity evidence supporting the interpretation and use of TOEFL iBT scores, TOEFL iBT Research Insight, Princeton" Educational Testing Service 2008

35 Seedhouse, P., "Topic development in the IELTS Speaking Test" IELTS 69-124, 2011

36 Douglas, D, "Theoretical underpinnings of the Test of Spoken English revision project, TOEFL Monograph Series" Educational Testing Service 1997

37 Canale, M., "Theoretical bases of communicative approaches to second language teaching and testing" 1 : 1-47, 1980

38 Lazaraton, A., "The revised test of spoken English(TSE): discourse analysis of native speaker and nonnative speaker data, ETS Research Report Series" Educational Testing Service 1996

39 Alderson, J. C., "The effect of students' academic discipline on their performance on ESP reading tests" 2 (2): 192-204, 1985

40 Clark, J. L, "The Test of Spoken English as a measure of communicative ability in English‐medium instructional settings, ETS Research Report Series" Educational Testing Service 1980

41 Davies, A., "The Logic of Testing Languages for Specific Purposes" 18 (18): 133-147, 2001

42 Fulcher, G., "Testing Second Language Speaking" Pearson Education 2003

43 Cronbach, L. J., "Test Validity" Erlbaum 3-17, 1988

44 Luoma, S., "Test Review: Test of Spoken English" 18 (18): 225-234, 2001

45 Enright, M., "TOEFL Program History, TOEFL iBT Research Insight" Educational Testing Service 2008

46 Butler, F. A., "TOEFL 2000 speaking framework, ETS Research Report Series" Educational Testing Service 2000

47 Boldt, R. F, "Multimethod construct validation of the Test of Spoken English, ETS Research Report Series, Princeton" Educational Testing Service 1993

48 Bachman, L. F, "Language Assessment in Practice: Developing Language Assessments and Justifying Their Use in the Real World" Oxford University Press 2010

49 Skehan, P., "Issues in the testing of English for specific purposes" 1 (1): 202-220, 1984

50 Linacre, J. M, "Institute for Objective Measurement"

51 Bachman, L. F., "Fundamental considerations in language testing" Oxford University Press 1990

52 Alderson, J. C., "Current Developments in Language Testing" Academic Press 121-127, 1983

53 Munby, J., "Communicative Syllabus Design" Cambridge University Press 1978

54 Luoma, S., "Assessing Speaking" Cambridge University Press 2004

55 Douglas, D., "Assessing Languages for Specific Purposes" Cambridge University Press 2000

56 Davies, A., "Assessing Academic English: Testing English Proficiency, 1950-1989: the IELTS Solution" Cambridge University Press 2008

57 Henning, G., "Analysis of proposed revisions of the Test of Spoken English, ETS Research Report Series" Educational Testing Service 1995

58 Balcom, P., "An ESP speaking course of international graduate students" 12 (12): 58-68, 1994

59 Chafe, W., "Academic Speaking" 26-40, 1986

60 교육부, "2016년 교육기본통계"