이해당사자 기반의 u-러닝 연구학교 프로그램 평가 연구 = A Stakeholder-based Evaluation for U-learning Pilot School Program

국문 초록 (Abstract)

이해당사자 기반 평가는 주요 이해당사자들의 다양한 평가 관점을 반영하는 평가로서, 각 이해당사자 집단의 주된 관심에 근거하여 평가계획 수립, 평가지표 개발, 평가자료 수집, 평가결과 보고 등이 이루어지는 평가이다. 이 연구는 이해당사자 기반 평가 방식을 u-러닝 연구학교 프로그램을 평가하는데 적용한 것이다. 이를 위해 먼저 이해당사자 기반의 평가 방식에 대해 구체적으로 논의한 다음, 이해당사자를 크게 4집단(교사, 학생, 전문가, 교육당국)으로 구분하고 각 이해당사자 집단별로 u-러닝 연구학교 프로그램을 평가하기 위한 평가지표를 개발하였다. 개발한 평가지표를 활용하여 이해당사자들이 실제로 u-러닝 연구학교 프로그램을 평가하였다. 그 결과 이해당사자 집단에 따라 전체 프로그램 평가결과가 다른 것으로 나타났으며(F=11.81, p<0.001), 그 중 교육당국의 평가점수가 가장 높은 반면, 교사의 평가점수는 가장 낮은 것으로 나타났다. 이러한 결과는 특정 교육프로그램을 종합적이고 균형 있게 평가하려면 해당 프로그램의 다양한 이해당사자들이 적정한 비율로 평가에 참여하도록 하는 것이 중요함을 시사한다.

다국어 초록 (Multilingual Abstract)

The stakeholder-based evaluation is an evaluation model that reflects main stakeholders' perspectives on a program, where all the evaluative processes including establishing evaluation plans, developing evaluation indicators, collecting evaluation data, reporting evaluation results are based on each stakeholder group's concerns. This study evaluated the U-learning Pilot School Program based on various stakeholders' perspectives. The stakeholders of the U-learning Pilot School Program are divided into 4 groups (teacher, student, professional, and educational authority) and the evaluation indicators were developed for each stakeholder group. Each stakeholder group evaluated the program by themselves based on their own evaluation indicators. As a result, the evaluation scores are significantly different among 4 stakeholder groups (F=11.81, p<0.001). While the educational authority group gives the highest score, the teacher group gives the lowest score. This finding suggests that various stakeholders should take part in the educational program evaluation for the comprehensive and balanced evaluation.

목차 (Table of Contents)

• Ⅰ. 서론
• Ⅱ. 이해당사자 기반 평가
• Ⅲ. 이해당사자 기반의 u-러닝 연구학교 프로그램 평가
• Ⅳ. 결론 및 제언
• 참고문헌
• 초록

참고문헌 (Reference)

1 서정희, "해외 미래교육 혁신 프로그램 조사" 교육학술정보원 2007

2 백순근, "학교정책평가의 필요성 및 지향점" 19 (19): 46-51, 2006

3 김주후, "프로그램 논리중심의 평가적용: TALENT 프로젝트의 사례를 중심으로" 한국교육평가학회 17 (17): 1-14, 2004

4 윤명희, "초등학교 방과후학교 평가도구 개발" 한국교육평가학회 21 (21): 1-19, 2008

5 김재윤, "유비쿼터스 컴퓨팅 환경에서의 교육의 미래 모습" 교육학술정보원 2004

6 김성훈, "교육평가는 교육을 교육답게 하는가?" 769-779, 2008

7 교육인적자원부, "교육인적자원부 지정 u-러닝 연구학교 운영종합보고서" 교육인적자원부 2005

8 김주후, "교육성과를 포함한 책무성 중심 학교평가 모형 개발 및 적용" 한국교육평가학회 19 (19): 21-43, 2006

9 진선미, "공무원 교육결과를 측정할 수 있는 평가방안 및 평가도구 개발 -서울시공무원교육원에서 운영하는 교육프로그램을 중심으로" 한국교육평가학회 18 (18): 187-212, 2005

10 이동규, "계층화분석과정에 의한 평가지수표 가중치 산정:사학기관의 재무비율을 바탕으로" 회계논집 2 : 77-105, 2001

11 권성호, "u-러닝 효과성 분석 연구" 교육학술정보원 2006

12 한선관, "u-러닝 효과성 분석 및 u-러닝 운영모델 개발 연구" 교육학술정보원 2007

13 Christie,C.A, "What guides evaluation?: A study of how evaluation practice maps onto evaluation theory" University of California Los Angeles 2001

14 Patton,M, "Utilization-focused evaluation" Sage Publication 1983

15 Greene, J. C, "Toward a conceptual framework for mixed-method evaluation designs" Educational Evaluation and Policy Analysis 11 : 255-274, 1989

16 Weiss,C.H, "The stakeholder approach to evaluation: Origins and promise" Jossey-Bass Inc 3-14, 1983

17 Weiser,M, "The computer for the 21th century" 1991

18 Eisner,E, "The art of educational evaluation: A personal view" Falmer Press 1985

19 Fetterman,D.M, "Steps toward empowerment evaluation: From California to Cape Town" Evaluation and Program Planning 17 (17): 305-313, 1994

20 Ayers,T.D, "Stakeholders as partners in evaluation: A stakeholder-collaborative approach" Evaluation and Program Planning 10 : 263-271, 1987

21 Mark, M. M, "Stakeholder-based evaluation and value judgments" Evaluation Review 9 (9): 605-627, 1985

22 Bryk,A.S, "Stakeholder-based evaluation" Jossey-Bass Inc 1983

23 Greene,J.C, "Stakeholder participation in evaluation design: Is it worth the effort?" Evaluation and Program Planning 10 : 379-394, 1987

24 Henry, G. T, "Stakeholder participation in educational performance monitoring systems" Educational Evaluation and Policy Analysis 13 (13): 177-188, 1991

25 Fitzpatrick, J. L, "Program evaluation: Alternative approaches and practical guidelines (3rd ed.)" Pearson Education 2004

26 Huat,Q.C, "Perspectives on evaluation of educational programs in Singapore" 2007

27 Cousins, J. B, "Participatory evaluation in education: What do we know? Where do we go?" Bargess Science Press 159-180, 1995

28 Heinecke, W. F, "New directions in the evaluation of the effectiveness of educational technology: Evaluation and assessment in educational information technology" Haworth Press 2001

29 Lowther, D. L, "Michigan 2005-2006 evaluation report: Prepared for Freedom to Learn and the one-to-one computing" The University of Memphis. 2007

30 Aspinwall, K, "Managing evaluation in education: A developmental approach" Routledge 1992

31 이인숙, "Mac기반 u-러닝 연구학교 효과성 연구" 교육학술정보원 2006

32 Newhouse,P, "Literature review: The impact of ICT on learning and teaching" Western Australian Department of Education 2002

33 Gulek, J. C, "Learning with technology: The impact of laptop use on student achievement" Journal of Technology, Learning, and Assessment 3 (3): 2005

34 Harris, W, "Laptop use by seventh grade student with disabilities: Perceptions of special education teachers" University of Maine, Maine Education Policy Institute 2004

35 Patton,M, "How to use qualitative methods in evaluation" Sage Publication 1987

36 Wholey, J. S, "Handbook of practical program evaluation (2nd ed.)" Jossey-Bass 2004

37 Guba, E. G, "Fourth generation evaluation" Sage Publication 1989

38 Shadish, W. R, "Foundations of program evaluation: Theories of practice" Sage Publication 1991

39 Forest, L. B, "Extension handbook: Process and practices (2nd ed.)" Thompson Educational Publishing 86-99, 1994

40 Sherry. L, "Evaluation of the Boulder Valley internet project: A theory-based approach to evaluation design" Journal of Interactive Learning Research 8 (8): 199-234, 1997

41 Bodilly, S, "Evaluating challenge grants for technology in education: A source book" RAND Critical Technologies Institute 1997

42 Nevo,D, "Dialogue evaluation: combining internal and validation" American Journal of Evaluation 24 (24): 315-340, 2002

43 House, E. R, "Deliberative democratic evaluation. New Directions for Evaluation" Jossey-Bass 2000

44 Mathison,S, "Deliberation, evaluation, and democracy: Evaluation as a democratic process: Promoting inclusion, dialogue, and deliberation" Jossey-Bass 85-89, 2000

45 House,E.R, "Assumptions understanding evaluation models" Kluwer-Nijhoff 1993

46 백순근, "2009학년도 중등교사 임용시험 정책에 대한 평가 연구" 한국교육평가학회 21 (21): 69-91, 2008

47 정부업무평가위원회, "2006년도 정부업무평가 시행계획(안): 2007년 3월 평가시행대비"

48 김양분, "2005 교육 수요자 만족도 조사 연구" 교육개발원 2005