교원양성기관 2주기 평가 모형 분석과 과제

권순달(Soon-Dal, Kwon) 한국교육평가학회 2009 교육평가연구 Vol.22 No.2

교원양성기관들은 2010년 시행 예정인 3주기 교원양성기관 평가에 높은 관심을 보이고 있다. 특히 이러한 교원양성기관 중에서 다양한 형태로 운영되고 있는 교육대학원이 2주기 평가 결과와 함께 향후 도입될 3주기 평가에 관심이 높다. 그 이유는 특히 3주기 교원양성기관 평가를 통해 교원양성 기능을 인정받지 못할 수 있다는 우려 때문이다. 이러한 이유에서 본 연구는 교육대학원 2주기 평가를 분석하고, 향후 시행될 교원양성기관 평가의 시사점을 제시하는데 있다. 이를 위하여 2주기 교육대학원 평가를 일반적인 평가 설계에 따라 평가 방향, 평가 영역(준거), 평가 방법 및 절차, 평가 결과 및 활용으로 구분하여 분석하였다. 이러한 틀을 가지고 30문항으로 된 설문지를 제작하여 전국 134개 교육대학원에 배부하였으며, 이 중 52개 교육대학원에서 응답하였다. 분석 결과, 교육대학원의 평가 방향 즉 평가 목적은 교육대학원 질 향상과 책무성으로 나타났으며, 평가 원칙에서 피 평가기관의 업무 부담을 최소화해야 한다고 응답하였다. 평가 내용에서는 교육여건보다 교육과정을 더 중요하게 여기고 있으며, 평가 영역과 항목에서 대해서는 정량적 평가 지표보다 정성적 평가 지표의 확대를 요구하고 있는 것으로 밝혀졌다. 또한 평가 기준을 지나치게 높게 설정하는 것을 우려하고 있는 것으로 나타났다. 그리고 평가 영역에서 시설보다 교육의 내용과 과정 중심으로 평가 지표를 개발할 할 것을 요구하고 있는 것으로 밝혀졌다. 평가 방법 및 절차에서 평가 주기는 4년 또는 5년을 선호하고 있으며, 평가단은 상시 전문 인력의 구성이 필요하다고 응답하였다. 평가 결과 및 활용에서도 새로 도입하려는 ‘인정’보다 현재의 4단계를 선호하고 있으며, ‘인정’을 받을 경우 혜택을 부여할 필요가 있는 것으로 나타났다. The purpose of this study is to analyze the evaluation model for the graduate schools of education. We have experienced the evaluation of teacher education institutions two times for 10 years. Through reviewing the second cycle of the evaluation on the graduate schools of education, was analyzed critics and the issues. By making an analysis, 30-items questionnaire was developed and delivered to the 134 graduate schools of education. And then was collected 90 questionnaires. The conclusions based upon the results are summarized as follows: First, it is shown that the goals and principles of the evaluation for graduate schools of education are quality of teacher educations and accountability. Second, the curriculum of teacher education are very important as evidences in program evaluation. Third, methods and procedures of evaluation are made a revision according as characteristic of graduate schools of education. Fourth, outputs of evaluation are opened. And if evaluation standards are satisfied, feedback must be provided powerfully. It is appeared that teacher education institutions want to make profound study for developing evaluation criterion and indicators in order to improve their validity and reliability.

교육 평가의 오용과 남용

권순달(Soon-Dal, Kwon) 한국교육평가학회 2013 교육평가연구 Vol.26 No.4

최근 교육 분야에서 평가의 확대는 평가 목적 달성이라는 긍정적인 면과 더불어 평가에 대한 부정적인 인식과 불신을 초래하고 있다는 비판이 제기되고 있다. 본 연구의 목적은 평가 불신이 평가의 오ㆍ남용 때문에 발생하는 것으로 인식하여, 평가의 오ㆍ남용을 줄이고, 평가에 대한 정확한 이해와 특히 평가 결과 활용을 바르게 하는데 있다. 연구방법으로 평가 오ㆍ남용의 개념과 요인을 고찰하고, 이에 영향을 주는 다양한 이해관련자들을 분석하여 평가 오ㆍ남용을 C형, P형, O형으로 구분하였다. 평가 오ㆍ남용의 예를 경험적 자료와 함께 제시하고, 오ㆍ남용을 줄이기 위하여 메타 평가 9가지 준거(U1, U3, U7, F2, P2, P5, P6, P7, A11)를 제시하였다. 연구결과, 평가의 오ㆍ남용이 발생되지 않도록 평가자는 고객이 요구하는 바를 이해하고, 이들에게 실질적인 도움을 주도록 노력할 필요가 있다. 더 중요한 것은, 평가자는 고객에게 평가 결과를 어떻게 활용할 것인가를 확인시켜야 한다. 그리고 평가 결과 보고서에 부정적인 내용도 모두 포함시켜야 한다. 이와 함께 미국평가학회가 제시하고 있는 평가자의 윤리 기준을 제시하였다. 결론적으로 평가의 오ㆍ남용은 평가자를 포함한 평가 이해관련자들이 지켜야 할 평가 윤리임을 확인하였다. The utilizations of program evaluation have been extended and used in many fields. And then as use increases, misuse and abuse will also increase. It appears that people ignore evaluations. Some people have the misunderstanding of evaluation and disbelieve the evaluation itself. The purpose of this study is to get rid of misunderstanding of evaluation and to appreciate the evaluation correctly. To achieve this goal the definition and factor were inquired. And they were discriminated misevaluation, abuse, misuse, and misutilization of evaluation. To avoid these it was provided some criteria of meta evaluation standards which had made by Joint committee on Standards for Educational Evaluation. And some scenarios of misuse or abuses was presented. This result reveals that abuse or misuse in evaluation was generated by many stakeholder in evaluation situations. They pressure the evaluator into accepting their need. And in consideration of evaluation procedural and stakeholder, three type of misuse or abuse were provided by author. There are C-type, P-type, and O-type. And examples of misuse or abuse was presented by evaluation cases. In conclusion, it appeared that the use or abuse of evaluation is a close connection of evaluation ethics. Therefore, it is necessary that all of the evaluators in evaluation context perform the evaluation rigorously.

연구에서 모형의 분류와 검정모형의 개발

권순달(Soon-Dal Kwon) 한국교육학회 2023 敎育學硏究 Vol.61 No.1

본 연구는 연구에서 널리 활용되고 있는 모형을 분류하고, 다양한 모형을 이해하는 데 있다. 이를 위하여 모형의 개념을 재정의하고, 모형의 분류 준거를 분석하고, 새로운 모형 분류 기준을 제시하였다. 본 연구에서 모형이란, “연구자의 이론, 철학, 신념 등을 반영한 것으로 논리적으로 제안된 그 무엇이다”라고 정의하였다. 여러 학문 분야의 모형 분류 준거가 다양하고, 대부분 이분화된 준거를 사용하였다. 이에 따라 연구자도 검정가능성을 모형의 분류 준거로 하여 검정모형과 비검정모형으로 분류하였다. 이 준거에 의하면 검정모형 제안자들은 데이터를 사용하여 자신이 개발한 모형을 검정하여 제시하고 있다. 그러나 비검정모형은 엄격한 검정이 이루어지 않고 제안되었다고 할 수 있다. 그리고 비검정모형들은 개발과정의 일반적인 절차를 따르지 않고 있다. 이러한 이유에서 검정모형 개발 5단계를 제안하였다. 물론 연구자가 제안한 검정 모형 개발 5단계는 하나의 ‘’비검정 모형‘이라고 할 수 있다. 검정모형과 비검정 모형의 개발은 누구나 할 수 있지만, 비검정모형이 아닌, 검정모형은 논리적인 절차에 따라 개발되고 검정될 필요가 있다. The purpose for this study is to classify models widely used in research and to understand various models. To this end, the concept of the model was redefined, the classification criteria of models were analyzed, and new model classification criteria were presented. In this study, a model is defined as “something that is logically proposed as a reflection of the researcher's theory, philosophy, beliefs, etc.”. There are various criteria for classification of models in many academic fields, but most of them use the dichotomous method. Accordingly, this researcher classified all models into a tested model and the non-tested model based on the test feasibility. The tested model refers to a model tested by the proposers using data. On the other side, nnn-tested model is a model proposed without rigorous testing. Tested models require rigorous development procedures, but non-tested models do not require such procedures. For this reason, five stages of test model development were proposed. Of course, the 5 stages of test model development proposed by the researcher can be said to be a ‘non-testing model’. Anyone can develop a model whether it is a test model or a non-test model, but a test model, not a non-test model, needs to be developed and tested strictly.

평가 이해관계자들의 평가 의미 분석

권순달(Soon-Dal, Kwon) 한국교육평가학회 2018 교육평가연구 Vol.31 No.3

본 연구는 ‘평가’에 대한 이해관계자들의 ‘평가’ 의미를 분석하는데 있다. 이를 위하여 평가의 개념에 대한 의미 분석(semantic differential methods)을 사용하였다. 이를 위하여 ‘평가’ 개념에 대한 3차원(활동차원, 능력차원, 평가차원)을 나타내는 형용사를 선정하고, 교사들에게 논리적 타당도를 검정하였다. 활동차원 12개 형용사, 능력차원 10개 형용사, 평가차원 4개 모두 26개 형용사를 사용하여 초중등학교 학생 및 대학생, 그리고 교사 등 604명을 대상으로 자료를 수집하여 탐색적 요인분석(EFA)을 하였다. 프로파일분석과 ANOVA을 실시하였으며, 구조관계를 파악하기 위하여 구조방정식모형으로 분석하였다. 연구결과 3차원 중에서 활동차원의 점수가 가장 높게 나타났으며, 초등학생을 제외한 중고등학생, 교사 모두 능력차원에서 부정적으로 인식하고 있는 것으로 나타났다. 3개 차원의 요인계수는 모두 유의하게 나타났으며, 모형은 적합한 것으로 나타났다. This study is to analyze the meaning of stakeholders in ‘evaluation’. To do this, semantic differential methods were used. For this purpose, the adjectives representing the three dimensions (ability, activity, and evaluation) of the concept of ‘evaluation’ were selected and the logical validity of the teachers was tested. With 12 activity dimension adjectives, 10 ability dimension adjectives, and 4 evaluation dimension adjectives are selected 26 adjectives. 604 subjects were collected and exploratory factor analysis (EFA) was performed. Profile analysis and ANOVA were conducted. Structural equation modeling were used to analyze structural relationships. As a result of this study, the score of activity dimension was the highest among the three dimensions, and both middle and high school students and teachers except the elementary students recognized that they were negative in the ability dimension. Therefore, it is necessary to have a positive perception of the actual evaluation, and it is necessary to raise fairness in the evaluation activities. These results are highly suggestive to teachers in charge of teaching evaluation.

사랑의 이론과 측정 도구의 생태학적 평가

권순달(Kwon Soon-Dal) 고려대학교 교육문제연구소 2004 敎育問題硏究 Vol.0 No.21

본 연구는 Sternberg에 의해 제안된 사랑의 삼각형 이론과 측정 도구를 우리나라 청소년들에게 실시하고, 그 결과를 통하여 검사 도구에 대한 생태학적 평가를 하는데 그 목적이 있다. 그가 주장하는 사랑의 삼각형 이론은 친밀감, 열정, 헌신의 3요인으로 되어 있으며, 이 3요인들을 측정하는 도구는 모두 45문항으로 구성되어 있다. 청소년을 대상으로 5점 척도를 사용하여 자료를 수집하였으며, Sternberg와 동일한 방법으로 각 요인별 상.하부 15% 점수와 전체 평균 점수를 산출하고 요인분석을 하였다. 분석 결과, 두 나라 모두 친밀감 상.하부 점수 및 평균 점수가 가장 높게 나타났다. 요인분석도 Sternberg의 분석 결과와 동일하게 나타나, 그의 사랑 측정 도구는 우리나라에서 타당하다고 할 수 있다. 이와 함께 이 검사 도구의 신뢰도도 매우 높게 나타났다. 이를 기초로 하여 우리나라 청소년의 연령에 따른 사랑의 요인 구조를 확인하기 위하여 학교급별 공분산행렬(HΣ : Σ(1)=Σ(2)=Σ(3))을 검증한 결과 동일한 것으로 밝혀졌다. 우리나라 청소년들의 사랑 요인 구조를 분석한 결과 친밀감과 열정은 상관관계를 가지고 있으며, 이 두 요인이 각각 헌신의 요인에 .22, .35의 영향을 주는 것으로 밝혀졌다. 이 연구를 기초로 사랑의 지속 기간, 연령, 표집 방법을 다양화한 계속적인 연구가 요구된다. Love is among the most important thing in human being. Yet our knowledge of the nature of love remains uncertain because the concept of love is not defined and its tool is not considered scientifically respectable to measure love in Korea. The purpose of this study was to review the theory of love and evaluate the validation of the Sternberg's love scale in terms of ecology in Korea. He proposed the triangular theory of love(intimacy, passion, decision/commitment) and made the test tool to measure love. For this study translated Sternberg's test tool to Korean. It was composed of three factors and 45 items. Subjects were 170 middle schools, high schools, and university students. The reliability of tools was .92, .93, .95(Cronbach alpha) each other. Results are as follows. First, founded that his test tool of love is very valid in Korea and has high reliability. Second, appeared that the factor structure of love was the same in spite of the age. Third, was identified that the correlation of coefficient intimacy between passion is .62 and they have an direct effect on decision/ commitment. In conclusion, these results show that we must study love in science and need to understand how the emotional experiences are interpreted by the lovers.

자기평가와 공부요인의 구조관계 분석

권순달(Soon-Dal, Kwon) 한국교육평가학회 2020 교육평가연구 Vol.33 No.4

본 연구는 공부에 영향을 주는 정의적 특성과 자기평가의 구조관계를 분석하는 데 그 목적이 있다. 이를 위하여 공부요인을 외생잠재변수, 자기평가를 내생잠재변수로 하는 구조방정식모형을 개발하여 검정하였다. 분석 대상은 한국청소년정책연구원의 (KCYPS) 2018, 2019년 종단자료를 활용하였다. 연구결과는 다음과 같다. 공부요인 측정변수의 평균은 ‘공부의 가치’’가 가장 높게 나타났다. 공부요인 요인계수 크기는 자신감, 가치, 욕구 순으로 나타났다. 그리고 공부요인이 자기평가에 주는 영향은 초등학교보다 중학교에서 높게 나타났다. 4개 학년의 측정구조 동일성 검정에서 초등학교 4,5학년은 유사한 것으로 나타났으나, 중학교 1,2학년은 초등학교보다 측정구조가 일치하지 않는 것으로 나타났다. 공부에 영향을 주는 다양한 정의적 특성에 관심을 가질 때, 학생들은 자기평가의 성취도에 더 만족하게 될 것이다. 자기성찰의 의미로서 자기평가는 미래 학습의 성공가능성을 향상시길 것이다. The purpose of this study is to analyze the structural relationship between the affective characteristics that influence studyand self-assessment. To this end, a structural equation model was developed and tested with study factors as exogenous latent variables and self-assessment as endogenous latent variables. The subject of analysis was the longitudinal data of the Korea Youth Policy Institute (KCYPS) 2018 and 2019. As a result of the study, the size of the score of the study factors was in the order of value, confidence, and need, and the size of the factor coefficient that explains the study factors was in the order of confidence, value, and need. Therefore, it was found that elementary and middle school students know the value of studying, but their need is not great. Data from the 4th and 5th grades of elementary school showed that this model is good. The goodness-of-fit of model of the first and second grades of middle school was lower than that of elementary school. The order of coefficient size of study factors was similar to that of elementary school. In addition, the 4th and 5th grades of elementary school were found to be valid in the test for the sameness of the measurement structure, but the first and second grades of middle school were found to be inconsistent with the measurement structure. Students will be more satisfied with self-assessment when they are interested in the various affective traits that influence their study. This self-assessment may increase the likelihood of success in future learning.

‘사랑’의 요인 구조 분석과 평가

권순달(Soon-dal Kwon) 한국교육평가학회 2006 교육평가연구 Vol.19 No.2

  Love is the most important thing in human beings. Yet our knowledge of the nature of love remains uncertain because its tool was not considered scientifically respectable to measure love in Korea. This study reviewed concept of love and evaluated the validation of the Sternberg"s love scale in terms of ecology in Korea.<BR>  For this study used Sternberg"s test tool. It was composed three factors(intimacy, passion, decision/commitment), 45 items. Subjects were 553 university students. The reliability of tools was .92, .93, .95(Cronbach alpha) each other.<BR>  Results are as follows. First, founded that test items of love were very valid in Korea and has high reliability. Second, appeared that the factor structure of love was the same in spite of the age, sex marriage except terms. Third, was identified that the correlation of coefficient intimacy between passion is .62 and they have an .52 and .45 direct effect on decision/commitment.<BR>  In conclusion, these results show that we must study love in science and need to understand how the emotional experiences are interpreted by the lovers.   본 연구는 대학생들의 사랑 구조 요인을 분석하는데 그 목적이 있다. 측정 도구로 Sternberg가 제작한 45문항을 사용하였다. 대학생 및 대학원생들 553명을 대상으로 자료를 수집하였으며, 검사 도구의 타당도를 검증하기 위하여 요인 분석하여, Sternberg의 분석 결과와 비교하였다.<BR>  연구 결과, Sternberg의 분석 결과와 일치하고 있으며, 문화와 환경이 다른 우리나라에서도 타당한 것으로 밝혀졌다. 이와 함께 이 검사 도구의 신뢰도도 매우 높게 나타났다. 성, 연령, 혼인여부, 교제기간에 따른 요인구조를 파악하기 위하여 공분산행렬(HΣ : Σ<SUP>(남)</SUP>=Σ<SUP>(여)</SUP>)과, 요인패턴행렬(HΛ : Λ<SUP>(남)</SUP>=Λ<SUP>(여)</SUP>) 검증 결과 성, 연령, 혼인여부의 요인 점수는 차이가 없는 것으로 밝혀졌다. 다만 교제 기간에 따라 요인 구조가 동일하지 않는 것으로 나타났다. 이와 함께 대학생들의 사랑 요인 구조 분석 결과 친밀감과 열정과는 .62의 상관이 있으며, 헌신의 요인에 직접적으로 친밀감은 .52, 열정은 .45의 영향을 주는 것으로 밝혀졌다. 이 연구를 기초로 사랑하는 사람들을 대상으로 종속표집을 실시하여 보다 심층적인 연구가 요구된다.

‘교원능력개발평가’의 메타평가

권순달(Soon-Dal Kwon) 한국교육평가학회 2011 교육평가연구 Vol.24 No.3

본 연구는 현재 시범(법 개정과 동시에 실시 예정) 적용하고 있는 ‘교원능력개발평가’를 평가하는데 그 목적이 있다. 메타평가의 기준은 Joint Committee에서 개발한 인사 평가(personal evaluation)의 4가지 기준(정당성, 유용성, 실행가능성, 정확성)을 번안하여 사용하였다. 4가지 기준의 하위 기준으로 21 문항을 제작 하였으며, 신뢰도는 .84로 나타났다. 연구 방법은 ‘교원능력개발평가’의 직접적인 이해관련자(stake-holders)인 초ㆍ중등 교사275명을 대상으로 설문 조사하였다. 연구 결과, ‘교원능력개발평가’의 4개 기준 중에서 특히 ‘정당성’ 기준 점수가 낮게 나타났다. 특히 교사들은 ‘교원능력개발평가’가 메타평가의 ‘정당성’ 하위 기준인 교사들의 상호작용(자아존중감, 동기, 명예 등)을 저해한다고 인식하고 있음이 밝혀졌다. ‘유용성’과 ‘실행가능성’의 기준도 낮았다. 이를 통해 ‘교원능력개발평가'의 전면적 실시에 앞서, 이해관련자들의 폭 넓은 의견을 수렴하고, 적용에 있어서도 학교의 특성이나 상황을 고려할 필요가 있는 것으로 밝혀졌다. 즉 ’정당성‘을 확보를 위해 노력하고, 평가 결과의 활용 방안을 제시할 필요가 있다. The purpose of this study is to evaluate the teacher evaluation in Korea. The standards of meta evaluation are propriety, utility, feasibility, accuracy. These standards were developed by Joint Committee for personal evaluation. The questionnaire of this study was referenced above standards and made 21 items. The reliability was .84 (Cronbach α). The subjects was 275 teachers of the metropolitan area of Korea. The results showed as follows; First, specifically the score of propriety and accuracy standards was low. And teachers doubted about the propriety of teacher evaluation and believed that had bad effect on the interaction of teachers. In conclusion it appeared that this research had to collect the intensive opinions of teachers and consider the propriety and utility, before are implemented new education evaluation system and plan at school.

초등학교 학부모의 방과후 교육욕구 분석

권순달 ( Soon Dal Kwon ) 서울교육대학교 초등교육연구원 2000 한국초등교육 Vol.11 No.1

초등학교 학부모의 방과후 교육욕구 분석 An analysis of parent need about after-school programs in elementary school

교사 및 학교평가의 학교급별 차이와 관계 분석

권순달(Soon-Dal, Kwon) 한국교육평가학회 2014 교육평가연구 Vol.27 No.3

이 연구는 학생들의 교사 및 학교 평가의 차이를 분석하는데 그 목적이 있다. 이러한목적을 달성하기 위하여 동일 대상의 종단 연구 자료를 활용하였다. 2012학년도 초등학교 6학년 3,683명과 이들이 중학생이 되어 응답한 자료를 사용하여 차이 및 관계 분석을하였다. 교사평가 4문항의 신뢰도는 .89, 학교평가 6문항의 신뢰도는 .90으로 높게 나타났다. 연구결과 중학교에서 교사 및 학교 평가의 점수가 초등학교보다 낮게 나타났다. 초등학교는 학급담임제이고, 중학교는 교과담임제이기 때문에 교사 및 학교 평가에서 낮게나타난 것으로 판단된다. 한편 6년 동안 익숙한 초등학교와 달리 갓 입학한 중학교 만족도 평가에서도 상담과 진로지도를 제외한 모든 문항에서 초등학교보다 낮게 나타났다. 관계분석에서 초등 학교평가가 중등학교 교사평가에 부적인 영향을 제외하고 모두 정적으로 영향을 주고 있었다. 초등학교평가와 교사평가가 중등학교평가와 교사평가에 영향을 줄 것이라는 본 연구 모형 검정에서 χ2 값을 제외한 다른 적합도 지수(TLI, CFI, GFI)는 매우 높게 나타났다. 그러므로 중학교 교사들은 중학교 1학년 학생들에게 수업과 학교생활에 대하여 더 관심을 가질 필요가 있다. This study aims to examine the teacher and school evaluation of students longitudinally. For this purpose the data of 3,683 students who were 6th grades of elementary school in 2012 and 1st grades of middle school in 2013 were used. That is, they are identical. The tools consisted of 4 items of their teacher evaluation and 6 items of their school life. The reliability of the later was .90 and the former was .91. This results show that compared with the scores of 1st middle students, the scores of elementary students were higher. And all of except variable of the school life in elementary have an effect on variables of teacher evaluation. Hence goodness of fit of the this model is high of TLI, CFI, GFI except the χ2. In conclusion, it is necessary that teachers of middle school should have deep concern about their students instruction and school life. The reason of the results are discussed and suggestions are made for future studies.