국가수준학업성취도평가 연계자료를 활용한 고2 성취도 투사점수 산출방안 탐색 = Developing projection score for 11th graders using student level NAEA longitudinal data

국문 초록 (Abstract)

본 연구에서는 중3과 고2에 치르게 되는 국가수준학업성취도평가의 다양한 활용방안을 탐색해보는 작업의 일환으로, 과거 중3-고2 연계된 자료를 활용하여 현재 시험을 치르는 중3에 대해 고2 성취도에 대한 투사점수를 산출하는 다양한 모형의 타당성을 탐색해 보았다. Texas주에서 활용한 Texas Projection Measure의 산출모형을 기초로 국가수준학업성취도 자료의 구조와 우리나라 상황에 적용 가능한 2수준 다층모형 및 교차분류 2수준 다층모형을 활용하여 고2 성취도 투사방정식을 산출하고, 차년도 중3 성취도에 투사방정식을 적용하여 이들에 대한 고2 투사점수 및 투사등급을 산출하였다. 산출된 투사점수 및 투사방정식을 실제 고2 성취도 및 성취등급과 비교하여 투사모형의 정확성을 검토하였다. 분석결과 중학생들이 진학하는 고등학교에 따라 발생할 수 있는 변동성 및 평균으로의 회귀현상에 의한 성적분위별 과대투사 및 과소투사 현상이 포착되었다. 실제 적용에 있어서 이러한 문제를 반영하기 위한 교차분류 다층모형의 적용가능성 및 투사의 정확성을 높이기 위한 다양한 예측변수의 활용 등을 논의하였다.

다국어 초록 (Multilingual Abstract)

In this study, in an effort to explore various ways to utilize National Assessment of Education Achievement (NAEA), we explored the applicability of produce projection score for 9th graders using previously collected 9th-11th longitudinally linked NAEA data. Based on the Texas Projection Measure model, we suggested two types of projection equation-two level hierarchical and multilevel cross-classified model. 9th grader's projection score and achievement level for 11th grade were then calculated based on the projection equations. The precision of the projection is tested by comparing the projected score and achievement level with actual score and achievement level at 11th grade. Our result captured that there exist substantial variability depending on which high school the individual student will attend. Also, over- and under-projection was present depending on the achievement level mainly due to the regression toward the mean. To address these problems for actual implementation, the applicability of adopting cross classfied model and utilizing various background information is discussed.

목차 (Table of Contents)

• 국문초록
• Ⅰ. 서론
• Ⅱ. 이론적 배경
• Ⅲ. 분석결과
• Ⅳ. 요약 및 논의
• 참고문헌

참고문헌 (Reference)

1 김준엽, "학생 종단자료를 이용한 학교 부가가치지수 산출의 적용 타당성" 한국교육평가학회 25 (25): 213-239, 2012

2 강상진, "이원다층모형과 EM 계산법에 의한 최대우도 추정" 9 (9): 31-62, 1996

3 전민정, "다층자료의 구조적 특성에 따른 다층모형의 모수추정 비교 - 2-level HLM, 3-level HLM, CMM 방법의 비교 -" 한국교육평가학회 18 (18): 123-148, 2005

4 Lissitz, R. W., "The projection of performance on the Maryland high school graduate exam: Magnitude, modeling and reliability of results" 2006

5 Texas Education Agency, "Procedures for developing the Texas projection measure equations"

6 Goldstein, H., "Multilevel cross-classified models" 22 (22): 364-375, 1994

7 Texas Education Agency, "Calculating Projections with the Texas Projection Measure"

8 Texas Education Agency, "2010 TPM projection accuracy"