학점은행제 평가인정의 메타평가 준거 개발 = Development of Meta-evaluation Criteria for Accreditation of Academic Credit Bank System

국문 초록 (Abstract)

본 연구는 학점은행제 평가인정을 평가하기 위한 준거인 메타평가 준거를 개발하는데 목적이 있다. 문헌연구를 통해 메타평가 영역을 평가투입, 평가과정, 평가결과 및 활용의 세 영역으로 설정하여 총 30개의 준거를 설정하였다. 이에 근거하여 준거의 적합성 검토, 타당성 검증의 과정을 거쳐 29개의 준거를 개발하였다. 준거의 적합성 검토는 전문가 13명에게 실시하였고, 타당성 검증은 학점은행제 평가인정 평가위원(제15차)과 전국의 463개 교육훈련기관 학점은행제 실무자를 통하여 이루어졌다.
평가투입 영역의 준거는 평가목적의 타당성, 평가조직·기구의 적절성, 평가위원의 양적 적절성, 평가위원의 전문성, 평가위원의 선정 및 구성의 적절성, 평가예산의 적정성, 평가자료의 적절성, 평가영역 및 항목의 타당성, 평가지표 및 기준의 타당성, 평가점수 배분의 적절성 등 10개가 개발되었다. 평가과정 영역의 준거는 12개로서 평가주기의 적절성, 평가시기의 적절성, 평가방법의 적절성, 자체보고의 정확성, 서면평가의 충실성, 현장방문평가의 충실성, 평가절차의 합리성, 평가대상기관 오리엔테이션의 적절성, 평가편람 배포의 적절성, 평가위원 사전평가교육의 적절성, 평가의 객관성, 평가의 공정성 등이다. 평가결과 및 활용 영역의 준거는 평가결과의 신뢰성, 평가결과보고서의 충실성, 이의제기 기회의 적절성, 평가결과의 공개성, 평가결과의 활용성, 평가결과의 영향성, 메타평가의 적절성 등 7개이다.

다국어 초록 (Multilingual Abstract)

The purpose of this study is, as a standard to evaluate the academic credit bank system, to develop the meta-evaluation criteria. For that, the researcher established meta-evaluation criteria through a literature survey, and on the basis of that, conducted an investigation-study in the order of investing the appropriateness of the criteria, its validity research. Meta-evaluation area has been composed of the three items including evaluation input, evaluation process, evaluation results ＆ application, and total 30 criteria were established, After revising ＆ supplementing under the examination of the appropriateness of the criteria by 13 experts, 29 criteria were selected through the process of verifying their appropriateness. A questionnaire survey for the appropriateness verification was conducted on the evaluation committees(the 15th) of academic credit bank system, for its accreditation, and on the working-level persons for academic credit system in 463 educational training institutes throughout the country.
First, ten criteria for evaluation input area were developed: 1) the validity of evaluation purposes; 2) the appropriateness of evaluation organization·system; 3) quantitative appropriateness of evaluation committees; 4) the speciality of evaluation committees; 5) the appropriateness in the selection ＆ composition of evaluation committees; 6) the adequacy of evaluation budget; 7) the appropriateness of evaluation data; 8) the validity of evaluation area ＆ items; 9) the validity of evaluation index; 10) the validity of the allocation of evaluation score.
Second, twelve criteria for evaluation process area were developed: 1) the appropriateness of evaluation time; 2) the appropriateness of evaluation cycle; 3) the appropriateness of evaluating method; 4) the accuracy of in-house reporting; 5) the faithfulness of written evaluation; 6) the faithfulness of on-the-spot evaluation; 7) the rationality of evaluating procedures; 8) the appropriateness of orientation by an outside evaluating organization; 9) the appropriateness of evaluation handbook distribution; 10) the appropriateness of pre-evaluation education for evaluation committees; 11) the objectivity of evaluation; 12) the fairness of evaluation.
Finally, seven criteria for evaluation results ＆ their practical use area were developed: 1) the reliance of evaluation results; 2) the faithfulness of evaluation result report; 3) the appropriateness of objection chance; 4) the openness of evaluation results; 5) the practical use of evaluation results; 6) the influence of evaluation results; 7) the performance of meta-evaluation.

참고문헌 (Reference)

1 문영세, "한국 중앙심사평가제도의 메타평가적 분석" 1-37, 1996

2 백은순, "학점은행제에 대한 시론적 평가" 31 (31): 345-365, 2004

3 김국현, "학점은행제도의 정책과정에 대한 평가" 계명대학교 2006

4 박헌, "학점은행제도 운영개선에 관한 연구" 성균관대학교 사회과학연구소 40 (40): 223-301, 2001

5 이혜영, "학점은행제 활성화 방안 연구" 서울: 한국교육개발원 1999

6 최돈민, "학점은행제 학습과정 평가인정체제 개선방안 연구" 서울: 한국교육개발원 1999

7 교육부, "학점은행제 학습과목 평가편람" 서울: 한국교육개발원 1998

8 백은순, "학점은행제 평가체제 개선방안 연구" 서울: 한국교육개발원 2004a

9 최상덕, "학점은행제 평가인정 및 사후관리체제 개선방안 연구" 서울: 한국교육개발원 2005

10 백은순, "학점은행제 체제 발전방안 연구" 2003a

11 박인종, "학점은행제 질 관리체제 구축방안 연구" 서울: 한국교육개발원 2001

12 이우영, "학점은행제 직업교육기관의 역할. 학습국가 구현을 위한 학점은행제의 역할과 과제" 서울: 한국교육개발원 2005

13 유균상, "학점은행제 제도 개선 방안 학습국가 구현을 위한 학점은행제의 역할과 과제" 서울: 한국교육개발원 2005

14 최운실, "학점은행제 정착과 활성화 방안 연구" 서울: 한국교육개발원 1998

15 백은순, "학점은행제 운영체제 개선방안" 서울: 한국교육개발원 2004b

16 윤병우, "학점은행제 운영기관의 경쟁력 확보를 위한 개선 방안 학습국가 구현을 위한 학점은행제의 역할과 과제" 서울: 한국교육개발원 2005

17 백은순, "학점은행제 운영 방안 연구" 서울: 한국교육개발원 1997

18 오성삼, "학점은행제 실시에 따른 문제점과 발전방안" 94 : 56-63, 1998

19 박인종, "학점은행제 실시를 통한 평생학습체제의 질 관리" 5 (5): 64-84, 1998

20 신정철, "학점은행제 발전을 위한 정책 방향 학습국가 구현을 위한 학점은행제의 역할과 과제" 서울: 한국교육개발원 2005

21 노종희, "학점은행제 발전을 위한 교육훈련기관의 기능과 역할 분석" 서울: 한국교육개발원 1998

22 문희주, "학점은행제 교육훈련기관의 자율성 제고 방안에 대한 제언. 학습국가 구현을 위한 학점은행제의 역할과 과제" 서울: 한국교육개발원 2005

23 정기수, "학점은행제 교육훈련기관 자율성 제고 방안. 학습국가 구현을 위한 학점은행제의 역할과 과제" 서울: 한국교육개발원 2005

24 백은순, "학점은행제 교육훈련기관 실태조사 연구" 서울: 한국교육개발원 2005

25 백은순, "학점은행제 교육훈련기관 및 학습자 요구분석" 서울: 한국교육개발원 2003b

26 오병진, "학점은행제 공업계열 활성화 방안 연구" 서울: 한국교육개발원 2001

27 최운실, "학습사회 실현을 위한 학점은행제의 기능과 역할 제고. 학습국가 구현을 위한 학점은행제의 역할과 과제" 서울: 한국교육개발원 2005

28 김순남, "학교평가의 메타평가 준거 개발" 경북대학교 2002

29 김정원, "학교교육 개혁지원을 위한 학교컨설팅 사업(Ⅱ)" 서울: 한국교육개발원 2001

30 배호순, "프로그램 평가론" 원미사 1994

31 이정표, "평생학습 평가인정체제제도의 운영실태와 발전 방향" 3 : 81-111, 2000b

32 이정표, "평생학습 평가인정체제제도 구축 방향 탐색" 6 (6): 109-128, 2000a

33 최돈민, "평생학습 실현을 위한 열린교육체제 연구" 서울: 한국교육개발원 1998

34 교육인적자원부, "평생교육백서" 서울: 한국교육개발원 2004

35 김용훈, "지역연구개발사업의 메타평가 연구" 13 (13): 51-68, 2003

36 이찬구, "연구개발사업의 메타평가에 관한 연구 정보통신 분야를 중심으로" 충남대학교 1997

37 오혁진, "성인교육 프로그램에 대한 학습자의 평가준거 연구" 서울대학교 2000

38 임성옥, "사회복지시설 평가에 대한 메타평가" 경북대학교 2003

39 김형식, "사회복지 프로그램 평가" 서울: 아시아미디어리서치 1999

40 백은순, "독학학위제와 학점은행제의 통합방안 연구" 서울: 한국교육개발원 2002

41 백은순, "독학학위제와 학점은행제의 연계방안" 서울: 한국교육개발원 1999

42 김순남, "대학평가의 메타평가 준거 개발" 한국교육개발원 2004

43 이규영, "대학부설 평생교육원 프로그램 평가도구 개발" 인하대학교 2003

44 최지희, "기술계 학원의 평가체제 구축방안" 서울: 한국직업능력개발원 2002

45 홍형득, "국가연구개발사업의 메타평가에 관한 실증연구" 14 (14): 67-892, 2002

46 윤여각, "교육정책 결정ㆍ집행 과정에 대한 교육인류학적 검토 학점은행제를 중심으로" 3 (3): 19-50, 2000

47 김명수, "공공정책 평가론" 박영사 1993

48 이정표, "경험학습 인증체제의 구축 방향 탐색" 9 (9): 79-98, 2003

49 Ed, "The American Society for Public Administration" 1985

50 "Journal of Educational Research" 1940

51 NY, "Joint Committee on Standards for Educational Evaluation Standards for evaluations of educational programs" McGraw-Hill 1981

52 "Joint Committee on Standards for Educational Evaluation" 1994

53 American Evaluation Association, "Guiding principles for evaluators" 2004

54 백은순, "2006년도 학점은행제 운영사업 결과보고서" 2006