대학교육만족도 평가도구의 신뢰도 및 타당도 분석

국문 초록 (Abstract)

대학의 질 향상을 위해 교육의 직접적 수요자인 학생의 요구 반영이 필요하다.그러나 현재 교육만족도에 대한 체계적인 연구와 표준화된 평가 도구가 없어 교육만족도 척도 문항을 임의로 개발, 사용하고 있는 실정이다. 교육만족도를 구성하는 적절한 구인이 선택되었는지, 문항이 신뢰롭고 타당한지에 대한 검토가 필요하다.
본 연구에서는 2004년도 K대학교에서 제작된 교육만족도 평가 문항의 구성요인을 알아봄으로써 타당도와 신뢰도를 검토하는 것을 목적으로 하여 다음과 같은 연구문제를 설정 하였다.
첫째, 각 하위영역 점수에 대한 신뢰도는 어떠한가? 둘째, 종합점수에 대한 신뢰도는 어떠한가? 셋째, 교육만족도 평가도구가 설정하고 있는 요인구조는 자료에 의해서 적절히 확인되는가? 넷째, 교육만족도 각 하위요인이 관련 관찰변인에 영향을 미치는 정도는 어떠한가?
본 연구는 ‘교수’, ‘교육내용’, ‘학생활동’, ‘교육환경’, ‘학교이미지’로 구성된 교육만족도 평가 도구를 이용해 K대학에 재학 중인 학생들을 대상으로 13,429부의 자료를 수집하였다. 그리고 교육만족도 평가도구의 타당성 검증을 위한 일련의 분석을 시도 하였다. 그 결과를 요약하면 다음과 같다.
첫째, 교육만족도 평가 문항에 대한 문항 분석과 탐색적 요인분석 결과, 최종적으로 교육만족도 평가 도구에 포함된 문항은 총 24문항으로 ‘교수’ 5문항, ‘교육내용’ 4문항, ‘학생활동’ 4문항, ‘교육환경’ 7문항, ‘학교이미지’4문항 이었다. 이는 K대학에서 만든 교육만족도 평가도구의 각 문항이 관심 교육만족도 특성(구인)을 변별력 있게 적절히 측정함을 나타낸다.
둘째, 교육만족도 평가도구의 신뢰도를 검증하기 위해 내적 합치도를 분석한 결과 종합점수의 신뢰도는 .943으로 매우 높은 신뢰도를 보이고, 각 요인에 대한 신뢰도 Cronbach 는 .80～.90으로 나타나 영역별로 일관된 내용을 평가하고 있다는 증거를 보였다.
셋째, 탐색적 요인 분석 결과 각 요인의 설명 분산 값을 살펴보면 요인 1인 ‘교수’가 15.09%로서 가장 높고, 그다음으로 요인 2인 ‘교육내용’ (14.57%), 요인 3인 ‘학생활동’(12.45%), 요인 4인(10.93%), 요인 5인 ‘학교이미지’(10.00%)순임을 알 수 있다. 전체 설명 분산의 값은 63.00%로서 양호한 결과를 나타냈다.
넷째, 확인적 요인분석 결과, 전반적인 적합도 지수들이 양호하여 각각의 척도들은 그들이 측정하려는 구성개념을 제대로 측정하는 척도임이 판명되어 일반화 될 수 있는 모형임이 확인되었다.
다섯째, 5개 요인에 해당하는 하위문항들에 대한 표준화된 회귀계수를 구한 결과, 모든 문항들의 설명력이 40%～60%로 매우 비슷하게 나타난 것으로 보아 모든 문항들이 교육만족도를 잘 설명하고 있는 것으로 나타났다.

다국어 초록 (Multilingual Abstract)

The purpose of this study was to identify the factorial structure of the questionnaire of student Satisfaction in school developed by “K” University and examine the reliability and validity of the scores from the questionnaire. The questionnaire consists of 24 items that ask degrees of educational satisfaction in the five areas (or factors): (1) teaching, (2) learning contents, (3) student activities, (4) educational environment, and (5) pride in and image of the school. The five areas, in order, have 5, 4, 4, 7, and 4 items, and each area composes a subtest. Each item is scored using a 5-point Liker scale.
The primary research questions are as follows:
1. How is the reliability of each of the subtest scores?
2. How is the reliability of composite scores of the five subtests?
3. Is the factorial structure of the questionnaire identified by the empirical data collected in 2007?
4. What is the degree of influence of each factor on each item associated with it?
What follows summarizes the main results:
First, it was proven that each item of the questionnaire measures adequately the trait where it belongs. Second, the reliabilities (Cronbach’s alphas) of scores from the subtests ranged from about .8 to .9, and the reliability (stratified alpha) of the composite scores was shown to be .93. Thus, the area scores and composite scores from the questionnaire can be said to be very reliable. Third, an exploratory factor analysis showed that 63% of the total variance in observed scores is explained by the five factors. Fourth, a confirmatory factor analysis showed that the observed data are well explained by the factorial structure that is identified by the five factors, and thus the structural model posed is justified. Fifth, the factorial loadings of subtest items on their factor were very similar, which indicates that all items for a factor contribute almost equally to reflecting the underlying trait. In sum, empirical evidence was found that the scores of the questionnaire are quite reliable and valid for investigating degrees of educational satisfaction.

목차 (Table of Contents)

• Ⅰ. 서론 = 1
• 1. 연구의 필요성 및 목적 = 1
• 2. 연구문제 = 4
• Ⅱ. 이론적 배경 = 5
• 1. 교육 만족도의 개념 = 5
• 2. 교육 만족도 평가 도구의 구성 요소 = 5
• 3. 본 연구의 교육만족도 구성 변인 = 10
• 가. 교수 = 11
• 나. 교육내용 = 12
• 다. 학생활동 = 12
• 라. 교육환경 = 12
• 마. 학교 이미지 = 13
• 4. 신뢰도 = 13
• 가. 검사-재검사 신뢰도 = 13
• 나. 동형검사 신뢰도 = 14
• 다. 내적 일관성 신뢰도 = 14
• 라. 반분신뢰도 = 14
• 5. 탐색적 요인분석과 확인적 요인분석 = 15
• 6. 교육만족도 선행연구 분석 = 18
• Ⅲ. 연구 방법 = 22
• 1. 연구대상 = 22
• 2. 조사 도구 및 내용 = 23
• 3. 신뢰도 계수 추정방법 = 26
• 가. Cronbach α = 26
• 나. 종합점수의 신뢰도 = 26
• 4. 자료 처리 = 28
• Ⅳ. 연구결과 = 29
• 1. 교육만족도 신뢰도 = 29
• 가. 문항-전체 상관과 문항 제거시 신뢰도 = 29
• 나. 전체 및 요인별 신뢰도 = 30
• 2. 교육만족도의 구인타당도 = 31
• 가. 탐색적 요인분석 = 31
• 나. 확인적 요인분석 = 34
• Ⅴ.논의 = 38
• Ⅵ.요약 및 결론 = 41
• 참고문헌 = 44
• 부록 = 48
• 영문초록 = 52
• 국문초록 = 54