행동기술 평정척도를 활용한 예비교사의 실천적 교수역량 평가도구 개발 및 타당화 연구

국문 초록 (Abstract)

예비교사가 갖추어야 할 역량 중 하나는 교과교육을 성공적으로 수행할 수 있는 교수역량(teaching competency)이다. 이때 교수역량은 내용 관련 지식을 이해하고 암기하는 능력뿐만 아니라, 그 지식을 활용하여 제대로 가르칠 수 있는 실천적 수행 능력을 포함한다. 따라서 예비교사의 교수역량은 이론적 교수역량(theoretical teaching competency)과 실천적 교수역량(practical teaching competency)으로 구분할 수 있으며, 각각의 특성에 적합한 방식으로 평가하는 것이 필요하다. 그러나 현재 교사양성기관에서 실시하고 있는 교수역량 평가는 시험이나 보고서 등을 통해 이론적 교수역량 위주로 이루어지고 있다. 그러므로 예비교사의 교수역량을 종합적으로 평가하기 위해서는 실천적 교수역량을 제대로 평가해야 하며, 이를 위해 실천적 교수역량을 정확하게 평가할 수 있는 평가도구의 개발 및 타당화 연구를 수행하는 것이 필요하다.
이 연구에서는 예비교사의 실천적 교수역량을 평가하기 위한 방법의 하나로 리커트형 평정척도를 기반으로 행동기술 평정척도(behaviorally anchored rating scales)를 활용한 평가도구를 개발하고, 그것이 타당한지 여부를 확인하였다. 개발한 행동기술 평정척도는 구체적인 행동지표들의 수행 수준을 제시하는 평정척도로써, 실제 수행을 관찰하여 실천적 교수역량의 수준을 판단하기에 적합한 평가도구이다. 행동기술 평정척도를 개발하기 위해 선행연구들을 종합적으로 검토하고 현직교사들의 수업비디오를 분석하여, 실천적 교수역량을 평가하기에 적합한 행동지표들을 15개 하위 항목별로 15개씩 총 225개를 수집하였다. 그리고 13명으로 구성된 전문가협의회를 통해 수집된 행동지표의 수행 수준을 평정하여 고정된 수준 값을 산출하였고, 그 값에 따라 ①수준(매우 미흡)부터 ⑤수준(매우 우수)까지 각 단계에 근접한 대표적인 행동지표를 선정하였다. 최종적으로 실천적 교수역량의 5개 구성요인별 각 3개의 하위 항목(총 15개)에 대하여 각각 4개 또는 5개씩 총 65개 행동지표로 구성된 행동기술 평정척도를 개발하였다.
그리고 개발한 평가도구를 활용하여 예비교사의 실천적 교수역량에 대한 비디오 포트폴리오 평가를 실시하였다. 이 연구에서는 서울 소재 대학에서 교사양성과정을 이수하고 있는 29명의 예비교사를 대상으로 20분 내외 분량의 수업시연 비디오를 수집하여, 총 29개의 비디오 포트폴리오를 구성하였다. 평가는 29명의 예비교사가 참여한 자기평가와 5명의 평가전문가가 참여한 전문가평가의 두 가지로 진행하였으며, 리커트형 평정척도와 행동기술 평정척도를 순차적으로 투입하여 두 차례에 걸쳐 실시하였다.
주요 연구 결과를 요약하면 다음과 같다.
첫째, 개발한 행동기술 평정척도를 구성하고 있는 행동지표의 내용타당도는 양호한 것으로 나타났다. 전문가협의회에서 선정한 65개 행동지표의 내용타당도 지수는 실천적 교수역량의 하위 항목별로 평균 .77에서 .90으로 확인되었다. 이는 행동기술 평정척도가 실천적 교수역량을 제대로 평가하기에 내용적으로 타당한 것임을 시사한다.
둘째, 개발한 행동기술 평정척도의 평가자간 일치도가 높은 것으로 나타났다. 실천적 교수역량 평가를 실시한 전문가 5명의 평가자간 일치도(급내상관계수)는 .88로 양호한 신뢰도를 보이고 있었다. 이는 행동기술 평정척도가 다수의 전문가가 참여하는 평가에서 일관된 결과를 제공할 수 있음을 시사한다.
셋째, 개발한 행동기술 평정척도는 평가자의 평정 오류를 완화시키는 등 예비교사의 실천적 교수역량을 평가하기에 적합한 것으로 나타났다. 행동기술 평정척도와 리커트형 평정척도를 활용한 평가 점수의 차이를 분석한 결과, 예비교사들은 행동기술 평정척도를 활용할 때 리커트형 평정척도에 비해 자기평가 점수가 통계적으로 유의하게 상승하였다(t=-3.434, p<.01). 이에 대해 예비교사들을 대상으로 한 설문 응답 및 인터뷰 내용을 분석한 결과, 행동기술 평정척도가 구체적인 행동지표를 제시하여 평정의 수준에 대한 정확한 이해가 가능하였고, 그래서 객관적으로 자기 자신을 평가할 수 있었다고 보고하였다. 즉, 예비교사의 자기평가에서 인색함의 오류나 평정 기준의 오류 등 평정 오류가 완화되어 정확한 평가가 이루어질 수 있는 것으로 나타났다. 또한 자기평가와 전문가평가 점수의 상관을 분석한 결과, 행동기술 평정척도가 리커트형 평정척도에 비해 상대적으로 높은 것으로 나타나 정확한 자기평가를 실시하기에 더 적합한 것으로 확인되었다. 한편 평가에 참여한 전문가(5명)들의 의견을 분석한 결과, 행동기술 평정척도가 구체적인 가이드를 제공하므로 임의적인 해석이나 판단이 줄어든 것으로 보고하였다. 이는 행동기술 평정척도가 평정 오류를 완화시키고 객관적인 관찰과 정확한 평가를 실시하기에 적합한 것임을 시사한다.
넷째, 개발한 행동기술 평정척도는 관찰의 편리함과 판단의 수월성을 제공하여 실천적 교수역량을 평가하기에 유용한 것으로 나타났다. 행동기술 평정척도의 유용성에 대한 예비교사들의 설문 응답 및 인터뷰 내용을 분석한 결과, 평가 기준이 분명하게 제시되어 있어 자신의 실천적 교수역량을 스스로 평가하기에 용이하다고 보고하였다. 또한 평가에 참여한 전문가(5명)들의 의견을 분석한 결과, 행동기술 평정척도가 다수의 예비교사들을 평가함에 있어 일관된 기준을 적용하여 평정하기에 더욱 용이하다고 보고하였다. 이는 행동기술 평정척도가 예비교사의 수행을 관찰하여 실천적 교수역량을 평가하기에 실용적인 것임을 시사한다.
이 연구는 예비교사의 실천적 교수역량 평가에 활용할 수 있는 행동기술 평정척도를 개발하고 그것의 측정학적 양호도를 확인하였다는 점에서 의의를 찾을 수 있으며, 이 연구에서 개발한 행동기술 평정척도를 예비교사의 실천적 교수역량 평가에 다양한 방법으로 활용할 수 있을 것이다. 다만 이 연구는 예비교사들을 대상으로 제한된 범위에서 수행된 것이므로, 향후 현직교사를 대상으로 하는 행동기술 평정척도를 개발하는 등 연구의 범위를 더욱 확대할 필요가 있다.

목차 (Table of Contents)

• Ⅰ. 서론 1
• 1. 연구의 필요성 및 목적 1
• 2. 연구문제 7
• Ⅱ. 이론적 배경 9
• 1. 실천적 교수역량 9
• 가. 교수역량의 의미 9
• 나. 실천적 교수역량의 구성요인 14
• 다. 실천적 교수역량의 평가 19
• 2. 비디오 포트폴리오 평가 26
• 가. 수행평가의 일반적 특성 26
• 나. 비디오 포트폴리오 평가의 특성 31
• 다. 비디오 포트폴리오 평가 관련 선행연구 36
• 3. 행동기술 평정척도 39
• 가. 리커트형 평정척도와 행동기술 평정척도의 특성 39
• 나. 행동기술 평정척도의 개발 및 적용 46
• Ⅲ. 연구 방법 51
• 1. 연구 대상 51
• 2. 측정도구 53
• 가. 리커트형 평정척도 53
• 나. 행동기술 평정척도 55
• 3. 연구 절차 및 자료 분석 방법 56
• 가. 연구 절차 56
• 나. 자료 분석 방법 64
• Ⅳ. 연구 결과 65
• 1. 행동기술 평정척도의 개발 절차 및 결과 65
• 2. 행동기술 평정척도의 타당화 75
• 가. 행동기술 평정척도의 타당도 분석 75
• 나. 행동기술 평정척도의 신뢰도 분석 79
• 다. 행동기술 평정척도의 적합도 분석 82
• 라. 행동기술 평정척도의 실용도 분석 97
• Ⅴ. 요약 및 논의 105
• 1. 요약 105
• 2. 논의 109
• 참고문헌 117
• 부 록 129
• Abstract 173

참고문헌 (Reference)

1. 척도법, 박도순, 교육과학사, 서울: 교육과학사, , 2006

2. 델파이 방법, 이종성, 교육과학사, 서울: 교육과학사, , 2001

3. 수업방법탐구, 박성익, 서울: 교육과학사, , 1987

4. 현대교육평가, 이종승, 서울: 교육과학사, , 2009

5. 교육평가의 이해, 황정규, 학지사, 서울: 학지사, , 2016

6. 『수행평가의 원리』, 백순근, 교육과학사, 서울: 교육과학사, , 2000

7. 교육평가-이해와 적용, 박도순, 교육과학사, 파주: 교육과학사, , 2012

8. 수행평가의 타당성 연구, 남명호, 한국교육평가학회, 교육평가연구, 8(2), 115-143, , 1995

9. 중등교사 역량모델 개발, 조현정, 송민영, 백지연, (사)한국직업자격학회, 직업과 자격 연구, 4(2), 85-110, , 2015

10. 수업평가척도의 개발연구, 김종한, 이종승, 한국교육평가학회, 교육평가연구, 11(1), 127-151, , 1998

11. 수업관찰 분석과 수업연구, 주삼환, 한국학술정보, 파주: 한국학술정보, , 2009

12. 수행평가 타당화 논리의 탐색, 배호순, 한국교육평가학회, 교육평가연구, 12(1), 125-151, , 1999

13. “수행평가의 정당성과 문제점”, 김호권, 한국교육평가학회, 교육평가연구, 12(2), 1-10, , 1999

14. 교직수행지능검사의 타당화 연구, 임현수, 서울대학교 대학원 박사학위논문, , 2005

15. 초등 신임교사의 직무역량 요구도 분석, 정제영 ( Jae Young Chung ), 김갑성 ( Kap Sung Kim ), 선미숙 ( Mi Suk Sun ), 류성창 ( Josh Sung Chang Ryoo ), 윤홍주 ( Hongju Yun ), 강태훈(Tae hoon Kang), 부산대학교 과학교육연구소, 교사교육연구, 55(2), 201-213, , 2016

16. 포트폴리오 평가의 질관리 방안의 모색, 배호순, 한국교육평가학회, 교육평가연구, 10(1), 75-104, , 1997

17. 포트폴리오: 수행평가의 효율적인 대안, 이명숙, 대구교육대학교 초등교육 연구논총, 8, 33-50, , 1997

18. 교사의 실천적 지식에 대한 이론적 탐색, 김자영, 김정효, 한국교원교육학회, 한국교원교육연구, 20(2), 77-96, , 2003

19. 중등 신임교사의 직무 역량 요구도 분석, 선미숙, 정제영, 류성창, 정제영,김갑성,강태훈,류성창,윤홍주,선미숙, 윤홍주, 김갑성, 강태훈, 한국교원교육학회, 한국교원교육연구, 31(4), 373-396, , 2014

20. “교사-학생 관계 척도 개발 및 타당화”, 지은림, 한국교육평가학회, 교육평가연구, 16(2), 25-42, , 2003

21. 영어작문 수행평가의 채점행위 분석 연구, 김명숙, 한국교육평가학회, 교육평가연구, 12(2), 25-54, , 1999

22. 중등교사의 교수역량에 대한 경험적 연구, 황은희, 서울대학교 대학원 박사학위논문, , 2008

23. 교수활동의 질 개선을 위한 교사 자기평가, 원효헌, 한국교원교육학회, 한국교원교육연구, 19(3), 147-168, , 2002

24. 교육실습 전 후 예비교사의 역량변화 연구, 엄미리, 엄준용, 한국교원교육학회, 한국교원교육연구, 26(3), 491-508, , 2009

25. 수업 적용을 위한 포트폴리오 제작물 연구, 조한무, 한국스포츠교육학회, 열린교육연구, 6(1), 21-47, , 1998

26. 수행중심의 교사평가 영역 및 요소의 분석, 원효헌, 한국교육평가학회, 교육평가연구, 11(1), 103-126, , 1998

27. 중 고등학생을 위한 직업적성검사 개발(Ⅰ), 임언, 정윤경, 한국직업능력개발원 연구보고서, , 2000

28. 중 고등학생을 위한 직업적성검사 개발(Ⅱ), 정윤경, 임언, 한국직업능력개발원 연구보고서, , 2001

29. 비디오 포트폴리오를 활용한 교수능력 평가, 백순근, 교육평가연구, 12(2), 83-101, , 1999

30. 중등학교 교사의 생애단계별 직무역량 분석, 김희규(Kim HeeKyu), 엄준용(Uhm Joon Yong), 주영효(Joo YoungHyeo), 고려대학교 교육문제연구소, 교육문제연구, 29(4), 163-189, , 2016

31. 교사전문성을 위한 자기평가 준거 개발 연구, 김지선,김혁동,이원재,이동배, 김혁동, 이원재, 김지선, 이동배, 한국교원교육학회, 한국교원교육연구, 31(4), 167-196, , 2014

32. 학위논문 작성을 위한 교육연구 및 통계분석, 백순근, 서울: 교육과학사, , 2004

33. 한국과 중국의 사범대학 평가제도 비교 분석, 김이경(Kim, Ee-gyeong), 고소천(Xiaoqian Gu), 민수빈(Min, Soo-bin), 한국비교교육학회, 비교교육연구, 27(1), 97-121, , 2017

34. 교원양성과정에서 예비교사의 역량 변화 연구, 이정민, 이현우, 정정교, 평생교육 HRD연구, 13(1), 137-152, , 2017

35. 전문계 고교생의 직업기초능력 진단도구 개발, 황영아, 박동열, 한국농업교육학회, 농업교육과 인적자원개발, 41(2), 29-48, , 2009

36. 역량평가: 인적자본 역량모델 개발과 역량평가, 이홍민, 리드리드, 서울: 리드리드출판, , 2009

37. 예비교사를 위한 교사-포트폴리오의 내용 구성, 설양환, 초등학교교육연구, 6(1), 97-119, , 2006

38. “교원선발제도의 평가학적 검토와 개선과제”, 서민원, 한국교육평가학회, 교육평가연구, 20(2), 51-76, , 2007

39. 수업의 효율성 제고를 위한 교사 변인 탐색 연구, 허경철, 한국교육개발원, 한국교육. 205-221, , 1987

40. 예비교사의 학생평가 전문성과 교육실습의 효과, 송미영(Mi-Young Song), 김신영(Shinyoung Kim), 한국교육평가학회, 교육평가연구, 21(1), 79-97, , 2008

41. 교사 자기평가에 의한 교수활동 수행 수준의 분석, 원효헌, 김미옥, 한국교원교육학회, 한국교원교육연구, 20(3), 179-201, , 2003

42. 성취평가제에서의 교사 역량 지표 개발 및 타당화, 박은아, 서민희, 한국교육평가학회, 교육평가연구, 29(3), 433-456, , 2016

43. 음악과 교수 역량 강화를 위한 교육 프로그램 연구, 김영미, 한국예술교육학회, 예술교육연구, 14(1), 53-76, , 2016

44. 중등예비교사들의 교원 핵심역량에 대한 인식 분석, 박인우 ( Innwoo Park ), 신원석 ( Won Suk Shin ), 문은경 ( Eunkyung Moon ), 안암교육학회, 한국교육학연구, 22(1), 183-209, , 2016

45. 학생들이 지각한 ‘잘 가르치는 교사’의 수업행동, 김민성, 서울대학교 대학원 석사학위논문, , 1996

46. 수업의 효율화를 위한 교사수업행동 분석 모형 연구, 황선경, 강원대학교, 강원대학교 대학원 박사학위논문, , 2005

47. 초등학교 교사의 교수역량 평가지표 개발 및 타당화, 이대용, 김석우, 한국교육평가학회, 교육평가연구, 25(4), 581-604, , 2012

48. 사범대학 재학생의 교수역량: S대학 사례를 중심으로, 이현우, 조명희, 이혜연, 한국교원대학교 교육연구원, 교원교육, 30(3), 239-263, , 2014

49. 포트폴리오 교수-학습 및 평가: 과학교과를 중심으로, 김찬종, 교육과학사, 파주: 교육과학사, , 2012

50. 교사용 실천지능검사의 구성 요인에 대한 이론적 고찰, 백순근(Baek Sun-Geun), 한국교육평가학회, 교육평가연구, 18(2), 59-77, , 2005

51. 비디오 포트폴리오의 활용이 교수 능력에 미치는 영향, 김우정, 이화여자대학교 교육대학원 석사학위논문, , 1999

52. 학생 관점에서 바라본 사범대학 교육과정의 실제 분석, 김갑성, 중앙대학교 한국교육문제연구소, 한국교육문제연구, 29(2), 1-22, , 2011

53. 교사 역량에 대한 교사와 예비교사의 인식에 관한 연구, 장선영(Chang Sun-Young), 김명랑(Kim, Myounglang), 박인우(Park Inn-Woo), 엄미리(Um Mi-Ri), 고려대학교 교육문제연구소, 교육문제연구, 30, 79-107, , 2008

54. 교원양성교육에서의 좋은 수업에 대한 예비교사의 인식, 정미경, 한국교육과정학회, 교육과정연구, 25(3), 247-264, , 2007

55. 공학교육에서 교수-학습 포트폴리오의 개념과 활용 방안, 이희원, 신윤호, 한국공학교육학회, 공학교육연구, 11(1), 75-82, , 2008

56. 인적자원개발을 위한 교수 역량(teaching competency)모델개발, 노혜란, 최미나, 한국직업능력개발원, 직업능력개발연구, 7(2), 1-28, , 2004

57. 중등교사 역량 관련 변인들이 교사효능감에 미치는 영향, 신상명, 이주희, 한국교원교육학회, 한국교원교육연구, 33(4), 69-92, , 2016

58. 중등학교 교사의 교수역량 구 성요인에 대한 이론적 고찰, 이재열, 신효정, 함은혜, 유예림, 서울대학교 교육연구소, 아시아교육연구, 8(1), 47-69, , 2007

59. 중등학교 교사들이 사용하는 수업방법 및 교수행동의 분석, 길양숙, 한국교육과정학회, 교육과정연구, 17(1), 301-331, , 1999

60. 타당도에 대한 개념, 정의, 검증방법의 변화와 교육적 함의, 성태제, 한국교육평가학회, 교육평가연구, 13(2), 1-11, , 2000

61. 대학생의 직업기초능력 유형 진단 도구 개발과 타당화 연구, 박동열 ( Dong Yeol Park ), 한국농업교육학회, 농업교육과 인적자원개발, 38(2), 225-245, , 2006

62. A study on the development of portfolio assessment training programs for teacher, 김명선, 교육평가연구, 18(3), 265-303, , 2005

63. 예비영어교사들의 수업능력 신장을 위한 과정중심 지도방안, 이지연(Yi Jyi yeon), 학습자중심교과교육학회, 학습자중심교과교육연구, 17(2), 53-79, , 2017

64. 중등 예비교사의 교육실습이 ‘교육적 가치’에 미치는 영향, 백순근, 함은혜, 한국교육평가학회, 교육평가연구, 20(4), 1-29, , 2007

65. 뉴스미디어의 미래: 델파이조사와 시나리오 기법을 통한 탐색, 김영욱, 한국언론진흥재단, 서울: 한국언론진흥재단, , 2010

66. 예비 초등교사의 수업전문성 측정 도구 개발을 위한 기초 연구, 부재율, 정민수, 초등교육연구, 23(1), 196-211, , 2012

67. 학교교육에서 융합인재교육의 BARS 기반 핵심역량 평가도구 개발, 이규녀, 박기문, 한국기술교육학회, 한국기술교육학회지, 16(1), 196-217, , 2016

68. 한국 교사양성과정에서 교육실습 교육에 대한 성찰과 미래 방향, 강현석, 한국교원교육학회, 한국교원교육연구, 30(3), 47-74, , 2013

69. STEAM 교육의 교수역량 평가지표에 대한 중등학교 교사의 인식 분석, 김방희, 김진수, 한국기술교육학회, 한국기술교육학회지, 16(1), 122-140, , 2016

70. 컴퓨터 프로그래머의 직무수행 평가를 위한 행동기술척도(BARS) 제작, 김호동, 김명소, 조사연구, 1(2), 89-115, , 2000

71. 비디오 포트폴리오 평가가 중등 예비교사의 발표역량에 미치는 영향, 이재열, 백순근, 서울대학교 교육연구소, 아시아교육연구, 9(3), 107-127, , 2008

72. 기술교사의 실천적 교수역량이 중학생의 기술학습효과에 미치는 영향, 이명훈, 실과교육연구, 22(1), 277-291, , 2016

73. 수업의 질 개선을 위한 교사 수업능력 자기평가 방략에 관한 논리적 고찰, 김정환, 이계연, 한국교육평가학회, 교육평가연구, 18(3), 19-38, , 2005

74. 중등학교 담임교사 역량 탐구: 일반계 고등학교 담임교사 역량을 중심으로, 강석주, 한국교육학회, 교육학연구, 42(4), 237-264, , 2004

75. 기술과 수행평가에서 학습자 중심 루브릭이 채점 결과의 신뢰도 에 미치는 영향, 한지영, 한국직업교육학회, 직업교육연구, 25(3), 87-110, , 2006

76. Observation skills for effective teaching (6th ed.) . 설양환 외 공역 (2012). 효과적인 수업 관찰, Borich, G. D., 서울: 아카데미프레스, , 2010

77. 중등예비교수학교사의 효과적인 교육실습을 위한 수업 포트폴리오 활용방안 연구, 강현영, 수학교육학연구, 26(2), 225-246, , 2016

78. 비디오 포트폴리오 평가와 피드백 방식이 현직 교사의 실천적 교수역량에 미치는 영향, 백순근, 윤승혜, 한국교육평가학회, 교육평가연구, 24(4), 849-871, , 2011

79. “평가형식 및 척도화 방법이 다면평가에서 관대화 오류 및 후광효과에 미치는 영향,”, 김명소, 이광진, 한국심리학회, 한국심리학회지: 산업 및 조직, 21(2), 201-224, , 2008

80. 계층분석과정(AHP)을 이용한 중등교사 교수역량 척도의 하위 요인 간 상대적 중요도 분석, 길혜지, 백순근, 박경인, 한국교육평가학회, 교육평가연구, 25(3), 389-409, , 2012

81. ‘좋은 수업’에 대한 중등학교 교사들의 인식-중요도와 실 행도의 차이 분석을 중심으로, 권성연, 교육공학연구, 26(1), 185-215, , 2010

82. Educational measurement (4th ed.) . 한국교육평가학회 재미한인교육연구자협회 공역 (2015). 교육측정, Brennan, R. L., 서울: 학지사, , 2006

83. Explicit instruction: Effective and efficient teaching. 김윤옥 외 공역 (2014). 명시적 교수: 효과적 및 효율적 수업, Archer, A. L., Hughes, C. A., 서울: 교육과학사, , 2012

84. Becoming a reflective mathematics teacher (2nd ed.). 박성선 외 공역 (2015). 수업관찰 및 자기평가를 통한 반성적 수학교사되기, Artzt, A. F., Curcio, F. R., Armour-Thomas, E., 서울: 경문사, , 2008