Rasch 모형과 요인분석을 활용한 대학생 토론능력 평가도구 개발과 타당화 연구 = A Study on the Development and Validation of University Student Debate Ability Evaluation Tools Using the Ratch Model and Factor Analysis

국문 초록 (Abstract)

본 연구는 대학생의 토론능력 평가도구를 개발하고 이를 검증하기 위해 실시되었다. 이를 위해서 토론능력과 토론능력의 평가요소를 구분할 필요가 있다. 선행연구 분석과 전문가 협의를 통해 토론능력 평가요소를 ‘논리적 구성력’과 ‘표현전달력’으로 추출하였다. 추출된 평가요소를 교수자가 관찰하여 평가가 가능하도록 토론자의 토론 언어와 행동을 측정하는 평가문항으로 수정하였다. 대학생의 토론능력 평가를 위해 논리적 구성력과 표현전달력에 해당하는 문항으로 평가도구를 구성하였다. 토론능력 평가도구의 객관성을 확보하기 위해 예비조사와 본 조사를 실시하였다. Rasch 모형과 탐색적 요인분석, 확인적 요인분석을 통하여 평가도구의 신뢰도와 타당도를 확보하였고 최종 13문항으로 구성된 평가도구를 개발하였다. 본 연구는 교수자가 토론 교육현장에서 대학생의 토론능력을 평가하기 위한 객관적 토론능력 평가 도구를 제시하였으며, 논리적 구성력과 표현전달력의 중요성을 재확인한데에 의의가 있다.

다국어 초록 (Multilingual Abstract)

This study was conducted to develop and verify the discussion ability assessment tools of university students. To this end, it is necessary to distinguish between the evaluation factors of debate ability. Through prior research analysis and expert consultation, the elements of the evaluation of debating ability were extracted as ‘logical composition’ and ‘expression delivery.’ The extracted evaluation elements were modified to measure the debater’s discussion language and behavior so that the professor could observe and evaluate them. To evaluate the debate ability of the university students, the assessment tools were organized with questions corresponding to logical composition and expressive delivery. Preliminary surveys and main surveys were administered to ensure objectivity of the assessment tools for discussion ability. The reliability and validity of the assessment tools were secured through the Rasch model and exploratory and confirmatory factor analysis, and the assessment tools composed of the final 13 questions were developed. This study is meaningful in that the professor presented an objective discussion ability evaluation tools to evaluate the debate ability of university students at the debate education site and reaffirmed the importance of logical composition and expressive delivery.

목차 (Table of Contents)

• 1. 서론 2. 이론적 배경 3. 연구 방법 4. 연구 결과 5. 요약 및 시사점

참고문헌 (Reference)

1 박일수, "토의ㆍ토론 수업의 학습효과에 관한 메타분석" 한국교육과정평가원 15 (15): 153-178, 2012

2 이두원, "토론자의 디베이트 능력과 수행평가 모델 연구: 아카데미식 정책 디베이트를 중심으로" 한국커뮤니케이션학회 16 (16): 83-103, 2008

3 박세환, "토론능력의 구성개념 및 척도의 타당성 연구대학생 참여자를 대상으로" 한국언론학회 46 (46): 147-193, 2002

4 강태완, "토론능력 척도의 타당성 검증 연구" 한국방송학회 17 (17): 139-185, 2003

5 이선영, "토론 평가 패러다임 분석에 따른 토론 평가의 방향 고찰" 국어교육학회 (44) : 453-481, 2012

6 여미란, "토론 평가 양식의 비교 연구: 1:1 토론 평가표를 중심으로" 19-21, 2011

7 유해준, "토론 평가 방법 분석에 따른 토론 평가의 방향 고찰" 한국사고와표현학회 9 (9): 207-234, 2016

8 박세환, "토론 능력의 개념 구성 및 측정에 관한 연구 : 대학생을 중심으로" 경희대학교 언론정보대학원 2001

9 홍세희, "청소년 회복탄력성 척도의 Rasch 모형 분석" 미래를 여는 청소년학회 15 (15): 107-124, 2018

10 이익섭, "장애 정체감 척도의 Rasch 모형 적용" 한국사회복지학회 59 (59): 273-295, 2007

11 임경수, "잠재평균분석을 활용한 대학생 학업성취의 차이 검증 － 종합적 사고력과 지식탐구역량을 중심으로 －" 한국문화융합학회 42 (42): 281-305, 2020

12 장혜영, "아카데미 토론 평가에 대한 재고찰 - 토론승패와 설득은 일치하는가 -" 한국수사학회 (14) : 101-125, 2011

13 우수명, "마우스로 잡는 SPSS 20" 인간과 복지 2013

14 이연주, "대학생의 프레젠테이션 능력 진단도구 개발 및 타당화 연구" 한국교양교육학회 14 (14): 265-275, 2020

15 강태완, "대학생들의 토론학습동기와 인지욕구가 토론능력, 상호작용관여 및 논쟁성에 미치는 영향" 한국언론학회 47 (47): 249-278, 2003

16 김주환, "구조방정식모형으로 논문 쓰기" 커뮤니케이션북스 2009

17 우종필, "구조방정식모델 개념과 이해" 한나래출판사 2017

18 이동욱, "교양교육에서 말하기 역량 향상을 위한 교과목 개발 연구 ―건국대학교 글로컬캠퍼스의 사례를 중심으로" 한국문화융합학회 42 (42): 445-478, 2020

19 Boone, W. J., "Rasch Analysis in the Human Sciences" Springer 2014

20 Archer, C. C., "Prioritizing active learning : An exploration of gateway courses in political science" 44 (44): 429-434, 2011

21 Snider, A., "Many sides: Debate across the curriculum" IDEA 2002

22 Freeley, A. J., "Argumentation and debate" 2013

23 Browne, M. W., "Alternative ways of assessing model fit" 21 (21): 230-258, 1992

24 이준기, "AAAS유전 문항과 라쉬 모델을 활용한 동형의 유전개념검사지 개발" 한국현장과학교육학회 9 (9): 165-174, 2015