메타분석 연구의 고찰과 연구방법론적인 제안 = The review of meta-analysis and research methodology proposed

다국어 초록 (Multilingual Abstract)

The studies about meta-analysis began to grow exponentially, but their methodological review was not done properly. Focused on domestic studies about meta-analysis, the purpose of this study was to investigate research methodology and was to evaluate the quality of research methods. The 64 papers about meta-analysis were evaluated by four kinds of criteria such as problem criteria, design criteria, resulting criteria, and interpretation criteria. The results of this study were as follows. First, most of the studies received a appropriate evaluation in problem criteria. But there were problems with validity and reliability in design criteria. For example, before meta-analysis was conducted the specific criteria needed to be set, however most of studies did not. At the same time this research should be accomplished by 2 or more researchers, but there were a few papers. Second, the data collection process were dependent on the unpublished paper as master and doctoral dissertation, so bias issues were raised. The studies including fail-safe N were only a few. Prejudicial to the future complements, including journals and dissertations are equally likely to be desirable, also fail-safe N should be mentioned. Third, evaluation of the homogeneity test was inadequate in result criteria, and Fixed or Random effects model to choose the model that was overlooked by researchers. The SPSS and Excel was used more than CMA in Korea, and it was not founded that pictures and graphs were used universally in results. On other hand most of the studies received a positive evaluation in interpretation criteria.

국문 초록 (Abstract)

메타분석에 대한 연구들이 기하급수적으로 증가하기 시작하였으나 방법론적인 고찰은 제대로 이루어지지 않았다. 본 연구의 목적은 국내에서 실시된 메타분석들을 토대로 연구방법론 측면에서 검증하고, 질적인 평가를 하려는 것이다. 이를 위해 64편의 메타분석 논문을 대상으로 문제준거, 설계준거, 결과준거, 해석준거의 4가지 항목별로 연구방법론적인 평가를 실시하였다. 본 연구결과는 다음과 같다. 첫째, 문제 준거 항목에서는 대부분의 연구들이 양호한 평가를 받았다. 그러나 설계준거 항목에서 타당도와 신뢰도에 문제점이 있었다. 예를 들면, 메타분석을 실시하기 전에 구체적인 기준을 설정한 논문들이 많지 않았고, 또한 2인 이상의 연구자에 의해 수행된 연구들도 많지 않았다. 둘째, 자료수집 과정에서 출판되지 않은 석, 박사학위논문에만 의존된 편파성 문제가 제기 되었다. 앞으로 편파성을 보완하기 위해서 학술지와 학위논문을 골고루 포함하는 것이 바람직 할 것 같다. 셋째, 결과 준거영역에서 동질성 검증은 미흡한 평가를 받았으며, 고정모형 혹은 랜덤효과 모형을 간과하는 연구자들이 많았다. 국내 연구자들은 CMA보다 SPSS와 엑셀 프로그램을 더 많이 사용하였다. 또한 결과를 설명할 때, 그림이나 그래프가 보편적으로 활용되지 않았다. 반면에 해석준거에서는 대부분의 연구들이 양호한 평가를 받았다.

참고문헌 (Reference)

1 강홍숙, "협동학습의 효과에 관한 메타분석" 한국아동교육학회 15 (15): 69-82, 2006

2 김미선, "협동학습의 효과분석과 개선방안연구:메타분석을 중심으로" 국민대학교 2008

3 임채수, "협동학습 수업전략의 효과에 관한 메타분석" 경남대학교 2001

4 이원이, "학습전략프로그램의 효과에 대한 메타분석" (37) : 209-230, 2002

5 채명희, "학교적응을 위한 국내집단상담 성과연구에 대한 메타분석" 대구대학교 2006

6 한경희, "프로젝트 접근법의 효과에 대한 메타분석" 한국아동학회 25 (25): 131-152, 2004

7 홍성란, "초등학생 미술치료 효과에 대한 메타분석" 한국교육방법학회 22 (22): 71-90, 2010

8 신문승, "초등학교 창의성교육 프로그램의 효과에 관한 메타분석" 한국초등교육학회 22 (22): 113-135, 2009

9 김효정, "초등학교 아동에 대한 다중지능프로그램 효과 메타분석" 14 (14): 19-37, 2007

10 박승민, "청소년 인터넷 중독 집단상담 프로그램의 효과에 대한 메타분석" 한국상담심리학회 21 (21): 607-623, 2009

11 박혜정, "청소년 미술치료에 대한 메타분석" 영남대학교 2008

12 이기중, "창의성 신장 프로그램의 훈련효과에 대한 메타분석" 경남대학교 2004

13 최정선, "집단상담이 자기존중감에 미치는 효과 메타분석" 한국교원대학교 2004

14 조민아, "집단상담이 대인관계에 미치는 효과에 관한 메타분석" 전북대학교 2004

15 강진령, "집단상담 프로그램이 학업성취도에 미치는 효과 메타분석" 한국청소년상담복지개발원 12 (12): 81-90, 2004

16 이유미, "집단상담 프로그램이 ADHD아동의 행동변화에 미치는 효과 메타분석" 한국교원대학교 2006

17 이정민, "집단미술치료가 비행청소년의 행동특성에 미치는 효과에 대한 메타분석" 순천향대학교 2009

18 손명희, "집단놀이치료 프로그램 효과에 대한 메타분석" 대구대학교 2008

19 배소정, "진로집단상담 프로그램의 효과에 대한 메타분석" 한국기술교육대학교 2004

20 정애경, "진로미결정 및 관련변인에 관한 국내연구 메타분석" 한국상담학회 9 (9): 551-564, 2008

21 송인섭, "지능 및 창의성과 학업성취간의 연구에 대한 메타분석" 한국아동교육학회 15 (15): 167-186, 2006

22 이미현, "자아존중감 향상을 위한 집단상담 프로그램의 효과에 관한 메타분석" 전주대학교 2010

23 윤광심, "자기조절 학습이 학업성취에 미치는 영향에 관한 메타분석" 숙명여자대학교 2003

24 김형태, "자기성장 집단상담의 효과연구에 대한 메타분석" 한국상담학회 8 (8): 965-978, 2007

25 강희양, "인터넷 및 게임 중독 관련 변인에 대한 메타분석" 한국건강심리학회 12 (12): 733-744, 2007

26 김윤지, "인지행동집단상담이 아동의 불안 감소에 미치는 효과에 관한 메타분석" 계명대학교 2007

27 이안나, "인지행동 집단상담의 불안감소 효과에 대한 메타분석" 서울대학교 2003

28 홍은주, "음악치료를 통한 아동 및 청소년 집단 프로그램 효과에 대한 메타분석" 한국생활과학회 19 (19): 835-844, 2010

29 임진석, "음악치료 효과에 대한 국내 학위논문의 메타분석" 한국음악치료학회 9 (9): 1-22, 2007

30 김수희, "음악요법, 치료효과에 대한 메타분석 연구" 4 (4): 19-40, 2002

31 최옥순, "유아를 위한 창의성 활동의 효과에 대한 메타분석" 아주대학교 2005

32 홍소영, "유아 창의성 개발 프로그램의 효과에 관한 메타분석" 한국열린유아교육학회 14 (14): 359-381, 2009

33 한지호, "웹기반 학습의 효과에 대한 베타분석" 한양대학교 2002

34 최종일, "웹기반 교수학습 관련변인이 학습효과에 미치는 영향에 대한 메타분석" 건국대학교 2004

35 김수진, "우울증에 대한 인지-행동적 집단상담효과 메타분석" 숙명여자대학교 2001

36 이명자, "열등감 감소 프로그램의 효과에 대한 메타분석" 중등교육연구소 54 (54): 145-166, 2006

37 양소영, "아동학대 관련변인에 관한 메타분석" 성균관대학교 2001

38 류상희, "아동의 자아개념 관련변인에 관한 메타분석" 14 (14): 115-126, 2001

39 이민경, "아동발달에 영향을 미치는 보육관련 변인에 대한 메타분석" 숙명여자대학교 2001

40 임주영, "아동미술치료효과에 대한 메타분석" 숙명여자대학교 2003

41 변미희, "아동· 청소년 상담 효과에 관한 메타분석-합리적· 정서적·행동적 치료, 의사교류분석, 현실치료를 중심으로" 한국청소년복지학회 4 (4): 51-56, 2002

42 정순옥, "아동 및 청소년의 자아관련 변인에 미치는 미술치료효과에 관한 메타분석" 광운대학교 2004

43 박병기, "시험불안 관련변인의 메타분석" 한국교육심리학회 24 (24): 875-894, 2010

44 최은정, "섭식장애 관련변인에 대한 메타분석" 경북대학교 2004

45 서미옥, "사회적 기술 훈련 효과에 대한 메타분석" 한국교육학회 47 (47): 25-52, 2009

46 유연수, "사회적 고립아동의 사회적 기술훈련효과에 관한 메타분석" 성균관대학교 2001

47 조성은, "비행청소년을 위한 집단상담 효과에 대한 메타분석" 한국청소년학회 11 (11): 135-150, 2004

48 백현주, "분노조절 훈련 효과에 관한 메타분석" 성균관대학교 2008

49 안현정, "부모-자녀간 의사소통 관련 변인에 관한 메타분석" 10 (10): 65-81, 2005

50 신귀순, "보육의 질이 영유아 발달에 미치는 영향에 대한 메타분석" 경희대학교 2006

51 오민경, "미술치료 효과에 대한 메타분석:아동 및 청소년 집단프로그램 중심으로" 원광대학교 2003

52 박숙희, "미술치료 효과에 관한 메타분석 -박사학위논문을 중심으로" 한국상담학회 11 (11): 429-447, 2010

53 서우경, "미성취영재아의 학업성취 관련변인에 대한 메타분석" 숙명여자대학교 2004

54 홍기칠, "문제중심학습의 효과에 관한 메타분석" 교육과학연구소 39 (39): 79-110, 2008

55 하정문, "문제중심학습(PBL)의 학습효과에 대한 메타분석" 부산교육대학교 2008

56 김동일, "메타분석을 통한 학습전략의 효과연구" 교육연구소 3 (3): 71-94, 2002

57 홍경자, "메타분석을 통한 청소년의 자아존중감 향상을 위한 인본주의적 집단상담과 인지행동적 집단상담간의 효과비교" 2 (2): 23-44, 2001

58 이숙영, "메타분석을 통한 부모교육 프로그램의 효과연구" 한국상담심리학회 14 (14): 637-653, 2002

59 김지은, "메타분석을 통한 가정특성 관련변인이 학업성취에 미치는 영향" 동화와 번역연구소 271-299, 2001

60 김혜옥, "그림책 활동이 유아의 언어 및 언어창의성에 미치는 효과" 경희대학교 2009

61 임은미, "국내 집단 진로지도 및 상담 프로그램의 효과에 관한 메타분석" 한국청소년상담복지개발원 11 (11): 3-11, 2003

62 노성덕, "국내 또래상담 성과연구에 대한 메타분석" 한국청소년상담복지개발원 12 (12): 3-10, 2004

63 신선인, "가정폭력 노출경험이 아동 · 청소년 비행에 미치는 영향에 대한 메타분석" 한국가족사회복지학회 (23) : 153-182, 2008

64 강물레, "ARCS 동기전략의 효과에 관한 메타분석" 한국교육공학회 22 (22): 83-104, 2006