학생 종단자료를 이용한 학교 부가가치지수 산출의 적용 타당성 = Review of Feasibility of School Value-added Using Student's Longitudinal Data

국문 초록 (Abstract)

본 연구는 2011년 국가수준 학업성취도 평가 결과 향상도 공시를 위한 학교 향상도 지표 개발을 위해 부가가치 모형을 중심으로 한국의 맥락에서 타당한 변수들을 검토하는데 그 목적이 있다. 이를 위하여 2009년 고등학교 1학년과 2010년 고등학교 2학년의 평가결과를 연계하여 학생 종단자료를 구축하였고, 맥락 부가가치 모형을 중심으로 국가수준학업성취도 평가에서 활용할 수 있는 변수를 모형에 투입하였다. 연구결과, 부가가치 분석 모형 중 동일한 학생의 사전 성취도는 학생의 현재 성취도를 예측하기 위한 가장 강력한 변수였다. 또한 연도간 평가 결과의 비선형적 연관성을 반영하기 위한 사전 성취도 이차항의 투입과 학교의 평균적 성취도를 모형에 포함하는 것은 타당한 학교 부가가치를 산출하기 위해 필요하지만, 학교별 성취수준의 표준편차와 학교의 기초수급대상자 비율을 부가가치 모형에 포함하는 것은 현 시점에서 적절하지 않음을 제언하였다. 또한 소규모 학교의 문제를 포함하여 향후 정책적 시사점을 논의하였다.

다국어 초록 (Multilingual Abstract)

This study is aimed to review the feasibility of contextual value-added model (CVA) as a tool to develop school progress index for public announcement of 2011 NAEA results. For this, student's longitudinal data was established by linking evaluation results of high school first graders in 2009 with their 2010 results. Among the input variables of CVA model, variables that can be used in NAEA were put on the model. According to study results, student's prior achievement was the most powerful variable for predicting the student's current achievement. Also, quadratic term and schoollevel average of 2009 results turns out to be adequate predictor of 2010 results. These two terms properly reflect non-linear prior-post achievement relationship and school level contextual effect, respectively. However, including school-specific standard deviation of 2009 achievement level and percentage of school's National Basic Livelihood Security recipients in value-added model seems to be inadequate under Korean context. Finally, problems associated with estimating value-added measures for small sized schools were discussed in terms of school-specific estimation reliability and overall stability.

목차 (Table of Contents)

• Ⅰ. 서론
• Ⅱ. 맥락 부가가치 모형(CVA)
• Ⅲ. 연구방법
• Ⅳ. 연구 결과
• Ⅴ. 논의 및 제언
• 참고문헌
• 저자소개

참고문헌 (Reference)

1 김성숙, "우리나라 초․중․고 학생의 학업성취 특성 분석: 2009 국가수준 학업성취도 평가 전수 결과 중심" 한국교육과정평가원 2010

2 김준엽, "대규모 학업성취도 평가 자료를 활용한 학교 부가가치 추정모형의 비교" 한국교육평가학회 23 (23): 101-124, 2010

3 한국일보, "교장 평가에 학업성취도 반영 안한다"

4 Harris,D.N, "Value-added measures in Education" Harvard Education Press 2011

5 Tymms, P, "Value added in the primary school league tables, A report for the national association of head teachers" CEM centre, University of Durham 2004

6 Fitz-Gibbon,C.T, "The value added national project final report: Feasibility studies for a national system of value-added indicators" School Curriculum and Assessment Authority 1997

7 Ray, A, "The use of national value-added models for school improvement in English schools" 348 : 47-66, 2009

8 Raudenbush, S. W., "The estimation of school effects" 20 (20): 307-335, 1995

9 Conger, A. J, "Suppressor variables,prediction,and the interpretation of psychological relationships" 10 : 579-599, 1972

10 RAY,A, "School Value Added Measures in England:A Paper for the OECD Project on the Development of Value-Added Models in Education Systems" Department for education and Skills 2006

11 Goldschmidt, P, "Policymakers’ guide to growth models for school accountability: how do accountability models differ?"

12 Hox,J, "Multilevel analysis" Lawrence Erlbaum 2002

13 Choi, K, "Modeling heterogeneity in relationships between initial status and rates of change: Treating latent variable regression coefficients as random coefficients in a three-level hierarchical model" 35 (35): 54-91, 2010

14 Goldstein, H, "League tables and their limitations: Statistical issues in comparisons of institutional performance" 159 : 384-443, 1996

15 Allen, M, "Introduction to measurement theory" Brooks/Cole 1979

16 Raudenbush, S. W, "Hierarchical Linear Models: Applications and Data Analysis Methods" Sage Publication, Inc 2002

17 Ballou, D, "Controlling for student background in value-added assessment of teachers" 29 (29): 37-65, 2004

18 Choi, K, "Children left behind in AYP and non-AYP schools: Using student progress and the distribution of student gains to validate AYP" CA 2004

19 Bryk, A, "Assessing school academic productivity: The case of Chicago school reform" 2 : 103-142, 1998

20 Singer J. D, "Applied longitudinal data analysis" Oxford University Press 2002

21 Cohen, J, "Applied Mulple Regression/Correlation Analysis for the Behavioral Sciences" Erlbaum Associates 1983

22 Tekwe, C. D, "An empirical comparison of statistical models for value-added assessment of school performance" 29 (29): 11-36, 2004

23 강상진, "5․31 교육개혁 이후의 고교간 교육격차 추세분석-1995~2010학년도 대학 수학능력시험 결과 분석" 한국교육과정평가원 2010