문항반응이론에 의한 2005 대학수학능력시험 영역별 선택과목 점수조정의 타당성 검증 = Assessing Item response theory methods for moderation of elective subject test scores in 2005 Korean CSAT inquiry sections

다국어 초록 (Multilingual Abstract)

This study investigated if IRT methods had potentialities for moderation of elective subject test scores in 2005 Korean College Scholastic Ability Test (CSAT) inquiry sections. In order to that, 4 groups data were simulated based on conditions of 2005 Korean CSAT science inquiry section, and then IRT scaling method was applied to make the comparable scores of CSAT science inquiry section. The results of the study showed that IRT method with the design developed produced accurate estimates of ability and item parameters. This study also showed that using estimates of ability parameters was more appropriate than using true scores of IRT. This study implied that IRT methods have potentiality of scaling CSAT scores for the future.

국문 초록 (Abstract)

본 연구는 대표적 측정이론인 문항반응이론을 우리나라 대학수학능력시험 영역별 선택과목의 점수조정에 적용할 경우의 타당성을 검증하여 그 사용 가능성을 탐색하였다. 이를 위하여 2005 대수능 과학탐구 영역의 8개 과목 중에서 4개의 과목을 선택한 각기 다른 집단의 모의 반응 자료를 생성하여, 문항반응이론의 동시추정방법에 의해 문항과 능력 모수치를 추정하고 이를 모수치와의 분포정도를 비교하였다. 분석 결과, 능력 모수 추정치와 문항 모수 추정치는 비교적 정확하게 산출되었으며, 문항반응이론에 의한 능력 모수 추정치를 사용하는 것이 진점수를 사용하는 것보다 타당함이 밝혀졌다. 본 연구 결과는 대수능 문제은행 개발과 검사점수 비교를 위한 추후 척도개발에 문항반응이론을 적용할 수 있는 가능성을 보여주었다.

참고문헌 (Reference)

1 "피험자 집단의 이질성이 검사 동등화에 미치는 영향" 7 (7): 5-21, 1994

2 "순환동등화에 의한 2000학년도 대입수능시험 선택과목 점수 동등화 결과의 비교" 13 (13): 153-168, 2000

3 "수능시험 집단간 실력차이 보정 방법에 관한 연구" 2002

4 "문항반응이론과 선형방법에 의한 대학수학능력시험 선택과목 조정점수 비교" 40 (40): 161-180, 2002a

5 "모의실험에 의한 대학수학능력시험 선택과목 점수 동등화 방법들의 적합성비교 원점수와 동등화점수의 차이분석 교육학 연구" 41 (41): 363-384, 2003

6 "동등화를 이용한 대학수학능력시험 외국어 영역의 검사특성과 피험자능력의 비교" 16 (16): 87-104, 2003

7 "대학수학능력시험 결과보고 및 분석 방안 연구 연구보고" 한국교육과정평가원 98 (98): 1998

8 "대학별 고사를 위한 문항분석" 206-214, 1994

9 "단일 차원성을 가정하는 IRT모형으로 다차원 검사의 모수를 추정하고 동등화하는 방안" 9 (9): 23-42, 1996

10 "다른 교과의 점수를 연결하는 통계적 조절 방법의 타당성" 13 (13): 63-99, 2000

11 "검사동등화에 관한 이론적 고찰" 30 (30): 205-221, 1992

12 "검사 점수의 동등화수 교육평가연구" 169-196, 1993

13 "검사 동등화 시의 고려사항" 12 (12): 43-64, 1999

14 "검사 동등화 방법" 교육과학사 2001

15 "Test Equating: Methods and Practices" Springer. 1995

16 "RESGEN: Item Response Generator. ETS" New Jersey. Princeton 2000

17 "Population Invariance of IRT Equating for Advanced Placement(AP) program exams" Paper presented at the AERA 2004,April

18 "Linking Results of Distinct Assessments" 6 (6): 83-102, 1993

19 "IRT based test scoring and1 item analysis for graded open-ended exercises and performance tasks" 1989

20 "2005학년도 대학수학능력시험 점수 체제 세미나 자료집" 한국교육과정평가원 2002

21 "2005수능의 탐구영역내 과목간 점수조정에서 합집단 연계화 방법의 적용가능성" 16 (16): 163-182, 2003

22 "2005년도 대학수학능력시험 체제개선 연구" 2002

23 "2005 대수능 영역별 점수조정에 문항반응이론 사용 방안" 한국교육과정평가원 2002b

24 "2000년도 대입수능시험 선택과목 점수에 대한 2단계 선형동등화와 빈도추정동등화의 결과비교" 39 (39): 191-214, 2001

25 "'99학년도 대입수능시험 선택과목 원점수와 선형 또는 비선형 표준점수의 비교 및 표준화 효과의 실증분석" 37 (37): 219-243, 1999