프로그램의 논리주도적 평가준거체제 개념모형에 관한 고찰; 청소년활동 프로그램을 중심으로 = Conceptual Framework of Theory-Driven Evaluative Criteria Set : Choosing Youth Activity Program

다국어 초록 (Multilingual Abstract)

This study aims to investigate a conceptual framework of theory-driven evaluative criteria set for the program which is validated from theoretical points of view. Specifically, this study tries to answer the following questions. How should we develop appropriate categories and subsequent items for youth activity program evaluation? As a theoretical validation process, conceptual framework for evaluation is developed based upon the program theory. In order to construct evaluative criteria set, matrix is also developed. The construction of theory-driven evaluative criteria set is an on-going process and this study hopefully contributes to this process by adopting theoretical framework for not only youth activity programs but any other programs evaluation. This study recognizes the importance of representation of various perspectives from major stakeholders in youth program evaluation when applying evaluative criteria set. Finally, this study emphasizes that conceptual framework of the criteria set developed here is very comprehensive in its scope, which means that people in youth programs or evaluation study could use the items with high level of flexibility depending upon their specific contexts as well as interests.

국문 초록 (Abstract)

이 연구의 목적은 이론적으로 타당화된 논리주도적 평가준거체제를 개발하기 위한 개념 틀을 제시하는 것이다. 연구목적을 달성하기 위한 연구문제는 프로그램의 논리주도적 평가준거체제의 영역은 어떻게 구성되어야 하는 가를 청소년활동 프로그램에 적용하여 이론적 개념 틀로 알아보는 것이다. 평가준거체제 개념모형 고찰을 위한 이론적 타당화 과정으로서 프로그램논리를 적용한 이론적 개념모형을 구안하고 평가준거체제 개발을 위한 메트릭스를 작성하였다. 이 개념모형과 메트릭스를 활용하여 논리주도적 평가준거체제의 영역설정을 위한 이론적 근거를 제시하였다. 따라서 이 연구는 평가대상 프로그램의 논리를 파악하여 맞춤평가를 위한 이론적 근거를 제공하는 평가준거체제의 개념 틀을 개발하였다는 점에서 의의가 있다. 또한 평가준거체제를 활용하는데 있어서는 프로그램의 특성, 평가목적에 따라 평가핵심관련자의 다양한 관점을 반영하여 필요한 준거를 융통성 있게 선별하여 활용할 수 있도록 개발된 종합적인 평가준거체제의 개념모형이라는 점에서 의의가 있다.

참고문헌 (Reference)

1 배호순, "학교교육과정 평가설계의 합리화를 위한 프로그램논리의 적용" 한국교육평가학회 16 (16): 1-22, 2003

2 배호순, "프로그램논리에 입각한 학교교육과정 평가논리체계의 정립" 15 (15): 43-68, 2002b

3 배호순, "평가의 원리" 원미사 1991

4 김진화, "청소년활동 프로그램 개발의 이해" 서울: 한국청소년개발원 2005

5 박성희, "청소년활동 프로그램 개발의 기초:프로그램 개발과 운영" 한국청소년개발원 1994

6 김정명, "청소년활동 동기부여방안 연구" 한국청소년연구원 1991

7 김경화, "청소년육성기금사업평가" 서울: 국가청소년위원회한국청소년개발원 2005

8 박영균, "청소년육성기금사업 성과평가 및 평가방안 연구" 서울: 문화관광부한국청소년개발원 2004

9 청소년위원회, "청소년위원회 법령집" 청소년위원회 2005

10 이광호, "청소년수련활동인증제연구" 서울:문화관광부 2004

11 문화관광부국립중앙청소년수련원, "청소년수련시설 청소년운영위원회 평가결과 보고서" 문화관광부국립중앙청소년수련원 2003b

12 문화관광부국립중앙청소년수련원, "청소년수련시설 청소년운영위원회 평가결과 보고서" 문화관광부국립중앙청소년수련원 2004c

13 문화관광부국립중앙청소년수련원, "청소년 수련시설 특성화프로그램 공모지원사업 선정평가 결과보고서" 문화관광부국립중앙청소년수련원 2004b

14 이광호, "우수 청소년 수련시설 선정인센티브 부여방안 연구" 서울: 한국청소년개발원 2000

15 문화관광부국립중앙청소년수련원, "시범청소년수련시설지정 및 인센티브 부여 사업결과 보고서" 문화관광부국립중앙청소년수련원 2002

16 김정주, "시범청소년수련시설 지정 및 인센티브부여 사업" 서울: 한국청소년개발원 2001

17 문화관광부국립중앙청소년수련원, "시범 청소년수련시설 지정 및 인센티브 부여 사업결과 보고서" 문화관광부국립중앙청소년수련원 2003a

18 문화관광부국립중앙청소년수련원, "시범 청소년수련시설 지정 및 인센티브 부여 사업결과 보고서" 문화관광부국립중앙청소년수련원 2004a

19 오혁진, "성인교육 프로그램에 대한 학습자의 평가준거 연구" 2000

20 김현철, "서울시 청소년활동프로그램 운영평가" 서울특별시한국청소년개발원 2005

21 이경상, "서울시 청소년활동프로그램 운영평가" 서울특별시한국청소년개발원 2004

22 변정현, "대학부설 평생교육기관의 교육서비스 마케팅 모형적용에 관한 연구" 2003

23 배호순, "논리주도평가의 이해와 활용 수업자료:Theory-Driven Evaluation" 2004

24 한국교육평가학회 편저, "교육평가 용어사전" 서울: 학지사 2004

25 배호순, "교육과정을 중심으로 한 프로그램논리패턴의 탐색" 15 (15): 1-25, 2002a

26 배호순, "교육과정 평가론" 서울: 교육과학사 2001

27 배호순, "교육과정 평가논리의 탐구" 서울: 교육과학사 2000

28 Benson, A.,, "Visions of Quality: How evaluators define, understand and represent program quality" USA: JAI 2001

29 Patton, M. Q, "Utilization-Focused Evaluation: The New Century Text" Thousand Oaks, CA: Sage 1997

30 Chen, "Using Theory to Improve Program and Policy Evaluations" 1992

31 Bickman, "Using Program Theory in Evaluation New Directions for Program Evaluation" Jossey-Bass 1987

32 Chen,H.T, "Theory-Driven Evaluations" Sage 1990

33 Rogers, P. J, "Program theory; Not whether program works, but how they work" Boston: Kluwer Academic 2000

34 Funnell, S, "Program Logic: An adaptable tool for designing and evaluating programs" 5-17, 1997

35 Fitzpatrick, J. L.,, "Program Evaluation: Alternatives Approaches and Practical Guides" NY: Longman 2004

36 Chen, H. T, "Practical program evaluation: Assessing and improving planning, implementation, and effectiveness" Sage publications 2005

37 Wholey, "New Directions for Program Evaluation" Jossey-Bass 7-92, 1987

38 Weiss, C. H, "Evaluation: Methods for Studying Programs and Policies" Upper Saddle, NJ: Prentice Hall 1998

39 Scriven, M, "Evaluation in the new millennium: The transdisciplinary vision" NJ: Lawrence Erlbaum Associates, Pub. 2003

40 Rossi, P. H.,, "Evaluation : A Systematic Approach" Thousand Oaks, CA: Sage 2004

41 House,E, "Evaluating with Validity" Sage 1980

42 Donaldson, S. I, "Evaluating Social Programs and Problems: Visions for the New Millennium" London: Lawrence Erlbaum Associates 2003