온라인 유아학습 웹사이트 평가도구 개발과 타당화 연구 = (The)study of online preschool children learning website evaluation tool development and validity

국문 초록 (Abstract)

본 연구의 목적은 유아교육 교사들이 교육현장에서 활용할 수 있는 ‘온라인 유아학습 웹사이트 평가도구’를 개발하고 타당화하는 것이다. 즉 유아학습 웹사이트가 학습에 활용되는 형태에 따라 정확하게 평가할 수 있는 각각의 도구를 개발함으로써 웹사이트 제작자에게는 유아의 발달단계를 고려한 웹사이트를 설계, 제작하도록 하고 교사에게는 유아의 발달에 적합하고 교육적으로 우수한 웹사이트를 선별하여 활용할 수 있으며, 유아에게는 능동적이고 주도적으로 학습하는 데에 도움을 주고자 시도되었다.
본 연구에서 개발하려는 온라인 유아학습 웹사이트 평가도구는 교실 현장에서 활용되는 형태에 따라 유아 학습형 평가도구와 교사 자료형 평가도구이며, 이 각각의 평가도구를 개발하고 타당화하기 위해 문헌고찰, 주제별 인터뷰, 2회에 걸친 델파이 조사, 통계적 검증과정을 거쳤다. 1차 델파이 조사에서는 유아에 관한 이론적/실무적 지식을 겸비한 21명의 전문가를 대상으로 하여 온라인 유아학습 웹사이트 평가도구 시안을 설문지로 구성하여 사용한 후, 내용분석법을 사용하여 각각의 평가도구를 수정/보완하였다. 2차 델파이 조사에서는 관련 학계, 연구기관, 현장실무자로 구성된 74명의 전문가를 대상으로 하여 수정/보완된 온라인 유아학습 웹사이트 평가도구를 설문지로 구성하여 사용하였다.
개발된 온라인 유아학습 웹사이트 평가도구를 타당화하기 위해 2차 델파이 조사에서 실시된 74명의 설문지가 분석에 사용되어 크루스칼-왈리스 테스트, 다차원척도법((MDS)을 통하여 1차 타당화 확인을 거쳤으며, 웹 활용 경험이 있는 국/공립 유치원 교사 177명을 대상으로 요인분석을 실시하여 평가도구의 2차 타당화를 확인하였다.
본 연구에서 밝혀진 결과를 요약하면 다음과 같다.
1. 온라인 유아학습 웹사이트 평가도구 개발 결과
본 연구에서 개발한 온라인 유아학습 웹사이트 평가도구는 유아교육과 교육공학적인 측면에 그 이론적 배경을 두고 웹사이트의 활용형태에 따라 유아 학습형 평가도구와 교사 자료형 평가도구를 각각 개발하였다. 유아 학습형 평가도구의 경우 콘텐츠 영역, 교수-학습 전략 영역, 인터페이스 영역의 3개의 영역, 교육성, 적합성, 통합성, 상호작용성, 동기유발성, 유아조절성, 연결성, 기능성, 사용의 용이성, 친숙성의 10개의 평가 준거, 97개의 평가항목으로 개발되었다. 교사 자료형 평가도구의 경우 콘텐츠 영역, 인터페이스 영역의 2개의 영역, 교육적 활용성, 정확성, 신뢰성, 연결성, 기능성, 사용의 용이성, 디자인의 7개의 평가준거, 63개의 평가항목으로 개발하였다.
2. 온라인 유아학습 웹사이트 평가도구 타당화 결과
본 연구에서 개발한 온라인 유아학습 웹사이트 평가도구는 두 차례에 걸쳐 타당화 검증을 거쳤으며 그 결과를 다음의 4가지로 제시하였다. 첫째, 활용형태별 평가도구의 영역별 전문가 집단 간 중앙값의 유사성, 둘째, 활용형태별 평가도구의 평가준거별 전문가 집단 간 중앙값의 유사성, 셋째, 전문가 집단 간에 다차원척도(MDS)를 통하여 활용형태별 평가도구의 영역 및 평가준거에 대한 유사성 확인, 넷째, 유치원 교사들을 대상으로 한 평가도구의 요인분석 결과를 제시하였다.
1) 활용형태별 평가도구의 영역별 전문가 집단 간 중앙값의 유사성 분석 결과
본 연구에서 개발된 온라인 유아학습 웹사이트 평가도구 중 유아 학습형 평가도구의 3개 영역(콘텐츠, 교수-학습 전략, 인터페이스)에 대한 전문가 집단 간에 중앙값이 유사한지를 알아보기 위해 비모수방법인 크루스칼-왈리스(Kruskal-Wallis) 테스트를 실시한 결과, 3개 영역별 모두에서 전문가 집단의 중앙값에 유의한 차이가 없었으며 이를 통해서 본 연구에서 제시하는 유아 학습형 평가도구에 대한 전문가 집단 간의 합의가 도출되었고 유아 학습형 평가도구 구성에 있어 3개 영역의 설정이 타당하다는 결과를 얻었다. 교사 자료형 평가도구에 있어서도 2개 영역(콘텐츠, 인터페이스)에 대한 전문가 집단 간에 중앙값이 유사한지를 알아보기 위해 비모수방법인 크루스칼-왈리스(Kruskal-Wallis) 테스트를 실시한 결과, 2개 영역별 중앙값 모두에서 유의한 차이가 없었으며 이를 통해서 본 연구에서 제시하는 교사 자료형 평가도구에 대한 전문가 집단 간의 합의가 도출되었고 교사 자료형 평가도구 구성에 있어 2개 영역의 설정이 타당하다는 결과를 얻었다.
2) 활용형태별 평가도구의 평가준거별 전문가 집단 간 중앙값의 유사성 분석 결과 유아 학습형 평가도구를 구성하는 10개의 평가준거인 교육성, 적합성, 통합성, 상호작용성, 동기유발성, 유아조절성, 연결성, 기능성, 상호작용성, 친숙성에 대한 전문가 집단 간에 중앙값이 유사한지를 알아보기 위해 비모수방법인 크루스칼-왈리스(Kruskal-Wallis) 테스트를 실시한 결과, 10개 평가준거의 중앙값 모두에서 유의한 차이가 없었으며 이를 통해서 본 연구에서 제시하는 유아 학습형 평가도구에 대한 전문가 집단 간의 합의가 도출되었고 유아 학습형 평가도구의 영역 구성에 있어 10개 평가준거의 설정이 타당하다는 결과를 얻었다.
교사 자료형 평가도구를 구성하는 7개의 평가준거인 교육적 활용성, 정확성, 신뢰성, 연결성, 기능성, 상호작용성, 디자인에 대한 전문가 집단 간에 중앙값이 유사한지를 알아보기 위해 비모수방법인 크루스칼-왈리스(Kruskal-Wallis) 테스트를 실시한 결과, 7개 평가준거의 중앙값 모두에서 유의한 차이가 없었으며 이를 통해서 본 연구에서 제시하는 교사 자료형 평가도구에 대한 전문가 집단 간의 합의가 도출되었고 교사 자료형 평가도구의 영역 구성에 있어 7개 평가준거의 설정이 타당하다는 결과를 얻었다.
3) 다차원 척도를 이용한 활용형태별 평가도구의 영역 및 평가준거에 대한 전문가 집단 간의 유사성 확인 결과 다차원 척도법(MDS)을 통하여 유아 학습형 평가도구 3개 영역과 10개의 평가준거에 대한 전문가 집단 간 의견의 유사성을 확인한 결과에서도 집단 간에 군집(cluster)을 형성할 수 없어 전문가 집단 간 의견이 유사하였음을 알 수 있었으며, 교사 자료형 평가도구 2개 영역과 7개 평가준거에 대한 전문가 집단 간 의견의 유사성을 확인한 결과에서도 집단 간에 군집(cluster)을 형성할 수 없어 전문가 집단 간 의견이 유사하였음을 알 수 있었다. 이를 통해서 본 연구에서 개발한 온라인 유아학습 웹사이트 평가도구의 타당성에 대한 전문가 집단 간의 합의가 도출되었음을 알 수 있었다.
4) 요인분석 결과
활용형태별 온라인 유아학습 웹사이트 설계에 기본이 되는 각각의 영역에 대한 속성을 확인하기 위하여 주성분분석과 Varimax 방법으로 요인분석을 실시하였다. 그 결과 유아 학습형 평가도구의 경우 컨텐츠, 교수-학습 전략, 인터페이스의 세 요인으로 구분이 되어 평가준거들이 각 영역을 형성하는데 적극적으로 기여함을 알 수 있었다. 교사 자료형 평가도구의 경우 컨텐츠, 인터페이스의 두 요인으로 구분이 되어 평가준거들이 각 영역을 형성하는데 적극적으로 기여함을 알 수 있었다. 요인분석 결과를 통해서 유아 학습형 평가도구는 콘텐츠, 교수-학습 전략, 인터페이스 3가지 영역으로, 교사 자료형 평가도구는 콘텐츠, 인터페이스 영역으로 구성하는 것에 대한 타당성을 확인하였다.
이상의 연구결과를 통해서 본 연구는 다음과 같은 의의를 지닌다.
이론적 측면에서는 웹사이트가 유아교육에 우수한 매체로 부각되고 있음에도 불구하고 적합한 웹사이트를 평가하는 기준이 마련되지 않는 시점에서 온라인 유아학습 웹사이트 평가도구를 개발하였다. 이를 위해 온라인 유아학습에 대한 개념을 정립하였고, 특히 온라인 유아학습 웹사이트를 활용하는 형태에 따라 유아 학습형과 교사 자료형으로 구분하여 각각의 웹사이트에 대한 개념을 정립함과 동시에 평가도구를 개발하였다. 방법론적인 측면에서는 주관적 성격의 델파이 방법과 객관적 성격의 통계적 방법, 통계적 방법에서도 주가 되는 통계방법과 이를 뒷받침 해 줄 수 있는 보조적 방법을 함께 사용함으로써 이후의 웹사이트 평가도구 개발의 방법론상에 발전적인 기틀이 될 것이다. 실제적 측면에서는 기존의 유아 교육용 소프트웨어 평가도구와 웹사이트 평가도구에서는 볼 수 없었던 콘텐츠 영역과 이를 전달하는 인터페이스 영역을 포괄적으로 포함함으로써, 향후 웹사이트를 제작하는 기관에게는 유아학습 웹사이트 설계에 대한 기본 지침을 제공하고, 현장교사들에게는 기존의 유아학습 웹사이트를 평가하는 준거를 제공하여 유아의 발달과 교육에 적합한 웹사이트를 선별하여 유아교육에 활용할 수 있게 한다는 측면에서 그 효용 가치가 기대되는 연구라고 결론지을 수 있다.

다국어 초록 (Multilingual Abstract)

This study is an attempt to develop the Online Preschool Children Learning Website Evaluation Tool and to validate it. The Online Preschool Children Learning Website is divided by type of the preschool children learning and of the materials to a teacher in accordance with practical usable type of Website. The conceptual model for this study draws upon many of the elements of recent studies on web-based learning. As a result, a type of preschool children learning was specified, which consists of 3 categories: the category of content, of teaching & learning strategy, of interface and of 10 subcategories. In a type of the materials to the teacher was specified, which consists of 2 categories: the category of contents, of interface and of 7 subcategories.
For these purposes, a number of literatures were reviewed and used, focus interview, 2 rounds of delphi method process and statistical analysis. On delphi method process, participants were Preschool Children education relevant professionals(professors, institute researcher and field experts). In first round, 21 field experts participated and answered the Online Preschool Children Learning Website Evaluation Tool prototype by open-ended question. In round 2, 74 experts(29 professors, 21 institute researchers, 24 field experts) and 177 national kindergarten teacher located in Seoul, Koungki, and Taejon. Participants dealt with the Online Preschool Children Learning Website Evaluation Tool which has corrected and strengthened the prototype with a checking scale of 1-6.
To validate the Online Preschool Children Learning Website Evaluation Tool, Kruskal-Wallis test, MDS and Reliability tests, Factor Analysis were used.
The results of this study were as follows:
First, a type of preschool children learning evaluation tool was constructed with 3 categories, 10 subcategories, 97 evaluation items and of the materials to teacher evaluation tool was constructed with 2 categories, 7 subcategories,and 63 evaluation item.
Second, The results of validate a type of preschool children learning evaluation tool and of the materials to teacher evaluation too showed congruence between three professional groups by the Kruskal-Wallis test method. Also MDS results showed euclidean gaps between three groups. But it appeared consistently distributed about the ideal points . Therefore we can assume there is congruence with the validity of individual evaluation items in the preschool children learning evaluation tool and the materials to teacher evaluation tool.
In the result of the factor analysis, three factors of a type of preschool children learning evaluation tool were identified. these were content, teaching & learning strategy, interface. three factors of a type of the materials to teacher evaluation tool were identified. These were content, interface.
As a result of this study, we developed the Online Preschool Children Learning Website Evaluation Tool to illuminate concepts related to the Online Preschool Children Learning in theoretical aspect. In methodological aspect, it also suggests new ways of developing indicator-system by using both the objective(statistical analysis) and subjective(delphi) methods. In practical aspect, Online Preschool Children Learning website evaluation Tool provide direction of Online Preschool Children Learning website design for website designer and also give standard to evaluate preschool children learning website and to select good website for kindergarten teacher.