다변량 일반화가능도 이론을 활용한 창의성 예비검사의 신뢰도 분석

국문 초록 (Abstract)

본 연구의 목적은 창의성의 다차원적인 속성 및 검사 대상의 발달단계를 고려하여 개발된 창의성 예비검사 문항들을 활용하여 집단 별 창의성 검사점수에 영향을 미치는 요인들의 상대적 영향력 및 신뢰도 향상을 위한 효율적 측정 조건을 알아보는 데 있다. 창의성은 영역일반성과 특수성 양자의 속성을 모두 가지고있을 뿐만 아니라 연령이나 학년 등 검사 대상의 발달단계를 고려해야 함에도 불구하고 기존에 개발된 대부분의 국내외 지필식 창의성 검사도구들은 이에 대한 충분한 고려가 이루어지지 않았다. 이에 본 연구에서는 저학년용(초등학교 5학년~중학교 2학년 학생 대상)과 고학년용(중학교 3학년~고등학교 3학년 학생 대상) 예비검사 문항에 대한 반응(N=257, 저학년용 149부, 고학년용 109부)을 분석하여 다음과 같은 연구 결과를 도출하였다. 첫째, 창의성 예비검사점수에 기여하는 오차 요인들의 상대적인 영향력은 대체로 고학년집단에서 저학년 집단보다 크게 나타났다. 둘째, 문항 수보다는 영역 수를 증가시키는 경우, 적정수준의 신뢰도에 도달하는데 보다 더 효율적인 측정조건으로 나타났지만, 각 집단에서 신뢰도를 향상시킬 수 있는구체적인 측정 조건들은 다르게 나타났다. 본 연구 결과는 차후 개발될 창의성 검사도구에 포함되는 영역이나 문항들이 집단(예: 연령이나 학년)에 따라 달라져야 하며, 창의성 검사도구에 대한 신뢰도 분석을 수행할 때 영역과 문항을 포함해서 다양한 변인들을 함께 고려할 것을 제안하고 있다.

다국어 초록 (Multilingual Abstract)

The purpose of this study was to improve the measurement conditions of a creativity test and the
relative influence of the factors affecting test reliability. Most of the paper-and-pencil creativity tests do
not involve multi-dimensional factors of creativity, and the factors included in the creative tests are likely
to be identical by students’ age or grade levels. This study involved 257 students and grouped them into
two, such as a lower grade level group (149 students in 5th through 8th grades) and a higher grade level
group (109 students in 9th through 12th grades), in order to examine if the number and content of the
creativity test items vary by the students’ grade levels and if identifying students by grade ultimately
enhances the reliability of the test. Major results showed that the relative magnitude of the variance
components that contributes to error scores of the creativity test showed larger values for students in the
higher grade level group than in the lower grade level group. Specific measurement conditions leading to
enhanced reliability indices varied by students’ grade levels. However, for both groups, increasing the
number of domains raised the reliability indices more than did increasing the number of items within the
domains. This study substantiated that the effects of the domains and the items involved in the creativity
test likely vary by students’ ages or grades and that various factors ought to be considered to analyze
reliability indices for creativity tests.

목차 (Table of Contents)

• Ⅰ. 서 론
• Ⅱ. 이론적 배경
• Ⅲ. 연구방법
• Ⅳ. 연구결과
• Ⅴ. 결론 및 제언

참고문헌 (Reference)

1 신문승, "초등학생 영재 판별을 위한 창의적 성향 검사 개발 연구" 한국교원대학교 대학원 2010

2 이경화, "초․중등 학생용「집단 통합 창의성 검사」개발 및 표준화" 한국교육심리학회 26 (26): 291-305, 2012

3 김미예, "체육 창의성 평가도구 개발" 한국체육측정평가학회 17 (17): 13-22, 2015

4 김영덕, "청소년 신체적 자기개념 척도의 타당화 연구" 한국체육측정평가학회 11 (11): 13-24, 2009

5 이화선, "창의적 문제해결 프로파일 검사(CPSPI)의 개발 및 타당화" 한국영재학회 24 (24): 733-755, 2014

6 이선영, "창의성 진단검사 개발을 위한 검사문항 타당화 및 신뢰도" 2015

7 이선영, "창의성 계발과 교육을 위한 이론적 모형 탐색" 한국교육심리학회 28 (28): 353-369, 2014

8 김미숙, "중학교 2학년 감상교육을 통한 창의력 신장에 관한 연구" 동아대학교 교육대학원 2002

9 박병기, "자기보고형 통합 창의성 척도의 개발 및 타당화" 한국교육심리학회 20 (20): 155-177, 2006

10 최연철, "일반화가능도 이론을 적용한 유아 기질 평가도구의 신뢰도와 오차요인 분석" 육아정책연구소 8 (8): 95-109, 2014

11 김성숙, "일반화가능도 이론을 이용한교사행위 관찰에 있어서 오차원 분석" 3 (3): 211-219, 1989

12 류춘렬, "일반화가능도 이론을 이용한 집단논리적사고력검사 (GALT)의 신뢰도 분석" 한국지구과학회 31 (31): 95-105, 2010

13 김성숙, "일반화가능도 이론" 교육과학사 2001

14 이경화, "유아·초등학생용『한국형 개별 창의성검사』개발" 한국교육심리학회 19 (19): 1023-1042, 2005

15 김미영, "유아 음악적 창의성 검사도구의 개발 및 타당화" 전남대학교 대학원 2010

16 이화선, "언어 창의성의 과제특수성에 대한 연구" 한국교육심리학회 21 (21): 385-400, 2007

17 김부윤, "수학에서의 창의적 태도의 측정도구 개발과 그 적용" 한국수학교육학회 45 (45): 25-34, 2006

18 황동주, "수학 영재 판별의 타당도 향상을 위한 수학 창의성 및 문제 해결력 검사 개발과 채점 방법에 관한 연구" 단국대학교 대학원 2005

19 이규민, "단위검사 개념의 적용 -일반화가능도 이론을 중심으로-" 한국교육평가학회 16 (16): 60-80, 2003

20 송인섭, "다변량 일반화가능도 이론을 통한 인식론적 신념 검사 타당화 연구" 한국교육방법학회 24 (24): 107-130, 2012

21 이영식, "다변량 일반화가능도 이론에 의한 말하기 시험의 타당도와 신뢰도에 관한 연구" 한국외국어교육학회 11 (11): 249-265, 2004

22 신지은, "과학 영재와 일반 학생의 창의성 비교 연구 : 확산적 사고와 과학 창의성을 중심으로" 서울대학교 대학원 2002

23 Csikszentmihalyi, M., "Theories of creativity" Sage 191-212, 1990

24 Amabile, T., "The social psychology of creativity: A componential conceptualization" 45 : 357-376, 1983

25 Cattell, R. B., "The prediction of achievement and creativity" Bobbs-Merrill 1968

26 Hocevar, D., "The development of the creative behavior inventory" 1979

27 Floyd, R. G., "The dependability of general-factor loadings:The effects of factor-extraction methods, test battery composition, test battery size, and their interactions" 37 (37): 453-465, 2009

28 Lopez, E. C., "The creative skills of culturally and linguistically diverse gifted students" 6 (6): 401-412, 1993

29 Csikszentmihalyi, M., "The creative personality" 29 (29): 36-40, 1996

30 Shavelson, R. J., "Sampling variability of performance assessments" 30 (30): 215-232, 1993

31 George, D., "SPSS for Windows step by step: A simple guide and reference. 11.0 update" Allyn & Bacon 2003

32 Torrance, E. P., "Role of evaluation in creative thinking" University of Minnesota 1964

33 Liang, C., "Reliability, validity, and factor structure of the imaginative capability scale" 26 (26): 106-114, 2014

34 Carson, S. H., "Reliability, validity, and factor structure of the creative achievement questionnaire" 17 (17): 37-50, 2005

35 Dunbar, S. B., "Quality control in the development and use of performance assessment" 4 : 289-303, 1992

36 Lakin, J. M., "Multigroup generalizability analysis of verbal, quantitative, and nonverbal ability tests for culturally and linguistically diverse students" 72 (72): 139-158, 2012

37 Epstein, R., "Measuring and Training Creativity Competencies : Validation of a New Test" 20 (20): 7-12, 2008

38 Brennan, R. L., "Manual for mGENOVA Version 2.1" Center for Advanced Studies in Measurement and Assessment, The University of Iowa 2001

39 하주현, "KEDI 창의적인성검사 3종 개발 보고서" 한국교육개발원 2011

40 유경재, "KEDI 창의적 인성검사 개발 및 타당화 연구" 교육연구소 12 (12): 217-247, 2011

41 Cramond, B., "Investigating creativity in youth" Hampton Press 1999

42 Kauchak, D. P., "Introduction to teaching: Becoming a professional" Pearson Higher Ed 2013

43 Domino, G., "Identification of potentially creative persons from the Adjective Check List" 35 : 48-51, 1970

44 Carroll, J. B., "Human cognitive abilities: A survey of factor-analytic studies" Cambridge University Press 1993

45 Sǖβ, H. M., "Handbook of understanding and measuring intelligence" 313-, 2005

46 Webb, N. M., "Generalizability theory:Inferences and practical applications" Jossey-Bass 49-66, 1983

47 Shavelson, R. J., "Generalizability theory: A primer (Vol. 1)" Sage Publications 1991

48 Brennan, R. L., "Generalizability Theory" Springer 2001

49 Feingold, A., "Gender differences in intellectual abilities : A new look at an old controversy" 62 (62): 61-84, 1992

50 Costa, P. T., "Four ways five factors are basic" 13 (13): 653-665, 1992

51 Murphy, K. R., "Fabry-Perot fiber optic sensors in full-scale fatigue testing on an F-15 aircraft" 1588 : 134-144, 1991

52 Lau, S., "Developmental trends of creativity : What twists of turn do boys and girls take at different grades?" 22 (22): 329-336, 2010

53 Claxton, A. F., "Developmental trends in the creativity of school-age children" 17 (17): 327-335, 2005

54 Runco, M. A., "Creativity: theories and themes:research, development, and practice" Academic Press 2007

55 Torrance, E. P., "Creativity in the classroom:What research says to the teacher" National Education Association 1977

56 Starko, A., "Creativity in the classroom: Schools of curious delight" Lawrence Erlbaum Associates 2005

57 Amabile, T., "Creativity in context: Update to the social psychology of creativity" Westview 1996

58 Baer, J., "Creativity Research in English- Speaking Countries" Cambridge University Press 2006

59 Sternberg, R. J., "Creative giftedness: A multivariate investment approach" 37 (37): 7-15, 1993

60 Beghetto, R. A., "Creative Self-Efficacy:Correlates in Middle and Secondary Students" 18 (18): 447-457, 2006

61 Bixenstine, V. E., "Conformity to peer-sponsored misconduct at four grade levels" 12 (12): 226-, 1976

62 Runco, M. A., "Commentary: Divergent thinking is not synonymous with creativity" 2 (2): 93-96, 2008

63 Domino, G., "Assessment of creativity with the ACL : An empirical comparison of four scales" 7 (7): 21-33, 1994

64 Soroaa, G., "Assessing interactions between cognition, emotion, and motivation in creativity: The construction and validation of EDICOS" 17 : 45-58, 2015

65 Gardner, H., "Art, mind, and brain: A cognitive approach to creativity" Basic Books 1982

66 Li, D., "A multi-group generalizability analysis of a large-scale reading comprehension test" Center for Advanced Studies in Measurement and Assessment, University of Iowa 2007