학교급 및 성별에 따른 컴퓨터용 청소년적성검사의 차별기능문항 탐색 = Exploration of School Level- and Gender-Related Differential Item Functioning of the computerized Aptitude Test for Youth

국문 초록 (Abstract)

컴퓨터용 청소년적성검사는 중학교 2학년에서 고등학교 3학년까지 청소년들을 대상으로 적성개발과 진로선택을 돕기 위하여 한국산업인력공단 중앙고용정보원에서 2002년도에 개발된 지필검사의 내용을 컴퓨터에 탑재하여 온라인으로 검사 실시 및 결과를 제공하고 있는 검사이다. 본 연구의 목적은 2004년도 컴퓨터용 청소년적성검사 동등화 연구를 수행하면서 수집된 자료를 가지고 학교급 및 성별에 따라 차별적으로 기능하는 문항을 추출하고 분석해서 컴퓨터용 청소년적성검사를 구성하는 하위검사 및 측정요인에 대한 타당성 및 시사점을 얻으려는데 있다. 이를 위해 컴퓨터용 청소년적성검사를 구성하는 15개의 하위검사 중에서 ‘선그리기’검사를 제외한 14개 하위검사를 대상으로 학교급과 성별에 따라서 차별적으로 기능하는 문항을 Rasch모형을 적용한 WINSTEPS 컴퓨터 프로그램을 사용해서 추출하였다. 분석결과를 제시하면 다음과 같다. 첫째, 학교급에 따른 하위검사의 차별기능문항분석 결과, ‘문자지각’검사의 경우 전체문항의 87%, ‘기호지각’검사의 경우 전체문항의 91%가 학교급에 따른 난이도 추정치 간에 의미 있는 차이를 보고하고 있다. 둘째, 성별에 따른 하위검사의 차별기능 문항분석 결과도 학교급에 따른 분석과 유사하게 ‘문자지각’검사 문항의 57%, ‘기호지각’검사 문항의 74.3%가 성별에 따라 차별적으로 기능하고 있는 것으로 나타났다. 이러한 원인으로 집단간 집중력의 차이 및 응답반응의 성실성을 지적하였으며, 검사유형에 대한 충분한 예제숙지 및 하위검사의 재배치와 관련된 논의를 전개하였다.

다국어 초록 (Multilingual Abstract)

The Computerized Youth Aptitude Test is an online service that provides the execution and result presentation of the paper and pencil Aptitude Test for Youth, which has been designed by the Human Resources Development Work Information Center in 2002 to aid the aptitude development and career choice of youth from second year in middle school to third year in high school. The objective of the the study is to extract and analyze the items that function differently according to school level and gender with the data gathered through the 2004 Computerized Youth Aptitude Test equating studies, and thereby acquire validity and implication regarding the sub-tests and measurement components. Towards this aim, the items that function differently according to school level and gender have been extracted from 14 among the 15 sub-tests of the Computerized Aptitude Test for Youth (the “Line Drawing” test has been excluded) using the WINSTEPS computer program, which applies the Rasch model. The analysis results are as follows. First, the analysis of the items in the sub-tests that function differently according to school level shows that 87% of the total items in the “Letter Perception” test and 91% of the total items in the “Symbol Perception” test report substantial disparity between the difficulty estimates according to school level. Second, the analysis of the items in the sub-tests that function differently according to gender similarly indicates that 57% of the total items in the “Letter Perception” test and 74.3% of the total items in the “Symbol Perception” test function differently according to gender. To explain this occurrence, the disparity between groups in attention span and sincerity towards item response has been noted, and the discussion about satisfactory familiarity with the test direction and exercise items and rearrangement of the sub-tests has taken place.

목차 (Table of Contents)

• 초록
• Ⅰ. 서론
• Ⅱ. 연구방법
• Ⅲ. 연구결과
• Ⅳ. 결과 및 논의
• 참고문헌
• ABSTRACT

참고문헌 (Reference)

1 "컴퓨터용 청소년적성검사 동등화 연구" 한국산업인력공단 중앙고용정보원 2004

2 "청소년용 적성검사 연구보고서" 한국산업인력공단 중앙고용정보원 2002

3 "성인용 직업적성검사의 검사양식간 비교성 검증 및 동등화 연구" 노동부 중앙고용정보관리소 2000

4 "교육측정ㆍ평가ㆍ연구ㆍ통계 용어사전" 중앙교육진흥연구소 1995

5 "The equivalence of scores from automated and conventional educational and psychological tests A review of the literature" Princeton -8 21, 1988

6 "The effects of mode test adminstration on test performance" 467-474, 1986

7 "The applicability of the Rasch model with varying item discrimination" 581-593, 1977

8 "Statistical aspects of the analysis of data from retrospective studies of disease" 22 : 719-748, 1959

9 "Probabilitic Model for Some Intelligence and Attainment Tests" Danmarks Paedogogiske Institute 1960

10 "MH 방법과 SIBTEST방법을 이용한 문항 유형에 따른 차별기능문항의 탐색" 17 (17): 215-235, 2004

11 "Influence of item characteristics on male and female performance on SAT-Math City University of New York" 1984

12 "Individual differences and test adminstration procedure" 53 : 53-79, 1995

13 "Handbook of research on mathematics teaching and learning" Macmillan 420-464, 1992

14 "Gender-related Differential item functioning on a Middle-school Mathematics performance assessment" Educational Measurement 21-27, 1996

15 "Gender-based differential item performance in mathematics achievement items" 24 : 157-166, 1987

16 "Equivalence of computerized and paper-and-pencil cognitive ability tests" 449-458, 1993

17 "Effects of answer feedback and test anxiety on the psychometric and motivational characteristics of computer-adaptive and self-adaptive vocabulary tests" 1996

18 "Contents factors in sex differences on test questions" Prinction 1973

19 Anderson,E.B, "Conditional inference for multiple choice questionnaires" 26 : 31-44, 1973

20 "A user's guide to Winsteps Rasch-model computer programs" 2005