http://chineseinput.net/에서 pinyin(병음)방식으로 중국어를 변환할 수 있습니다.
변환된 중국어를 복사하여 사용하시면 됩니다.
말하기 평가 채점기준표(rubric)의 상세화 및 적용 사례 연구 -설득 목적의 과제를 중심으로-
최영인,박성석,정민주,백정이,장성민,김예원,허모아,음소현,민병곤 한국국어교육학회 2023 새국어교육 Vol.- No.134
Purpose: This Study was performed to enhance scoring reliability through the refinement of speaking assessment rubric of persuasive speaking task. Methods: The speaking responses were collected from the preliminary survey and main survey on second-year secondary school students. In each survey, the refined scoring rubric was applied by two different groups of scorers and to two different target student groups. Results: After examining the scoring results, all scoring criteria, which consist of three major categories and seven subcategories, demonstrated high reliability except for the ‘explicitly of claim’ of the second scoring. In both surveys, the consistency of inter-rater reliability (ICC) was confirmed. Conclusion: In this study, it was confirmed that by refining the scoring rubric, the inter-rater reliability can be improved. 목적: 설득 목적의 말하기를 수행하는 과제에 대한 말하기 평가 채점기준표(rubric)를 일정 수준으로 상세화하고 그것이 말하기 채점타당도에 미치는 영향을 탐색한다. 방법: 중학교 2학년 학생들을 대상으로 말하기 평가(예비 조사, 본 조사)를 실시하여 말하기 응답을 수집하였다. 채점자와 채점 대상을 모두 달리하여 1차 채점(예비 조사 채점)과 2차 채점(본 조사 채점)이 진행되었고, 이때 상세화한 채점기준표를 적용하였다. 각각의 채점이 끝난 후 채점자 간 신뢰도(ICC)를 확인하였다. 결과: 채점 결과, 3개 대범주와 7개 하위 범주로 구성된 채점기준 항목에서 2차 채점의 ‘주장의 명료성’을 제외하고 모두 양호한 신뢰도를 보였다. 채점자 간 신뢰도가 낮은 항목에 대한 원인을 탐색하였다. 결론: 본 연구에서 제안한 ‘채점기준표 상세화’가 채점자 간 신뢰도를 높이는, 나아가 평가타당도를 높이는 방안이 될 수 있음을 확인하였다.
설득 화법의 청중 평가 양상에 대한 고찰 - 영향력 평가와 분석적 평가를 중심으로 -
최영인 서울대학교 국어교육연구소 2014 국어교육연구 Vol.33 No.-
설득 담화를 교육하는 장에서 동료 평가 혹은 상호 평가가 활용되고 있지만 청중들이 ‘어떤 기준으로’ 혹은 ‘어떻게’ 화자의 담화를 평가하는가에 주목하는 연구는 거의 진행되지 않고 있다. 본고에서는 대학생의 설득 화법에 대해 청중이 두 가지 방식으로 담화 평가를 수행하게 하고, 그러한 두 가지 평가 결과를 비교하였다. 21개 담화 중 3개 담화에 대한 청중의 영향력 평가 결과와 분석적 평가 결과에서 차이가 발견되었고 그 차이는 통계적으로 유의미하였다. 청중들이 평가의 이유를 기술한 내용과 담화 분석을 통해 그러한 상이한 평가 결과에 관여한 요인을 탐색한 결과 담화 주제의 참신성, 경험/예시를 통한 근거 제시와 감성 설득 전략 등이 영향력 평가에 작용함을 확인하였다. 이런 결과로부터 교실에서 설득 화법 평가를 실시할 때 고려해야 할 시사점을 도출할 수 있다. 첫째, 설득 화법의 교육 현장에서 청중으로서 학습자들에게 평가자의 역할을 위임할 때 ‘어떠한 정체성에 입각하여’ 혹은 ‘무엇을 기준으로’ 평가할지에 대한 안내 및 지침을 분명히 제공해야 한다. 둘째, 청중으로서 학습자들이 ‘설득 화법의 영향력’을 어떻게 인식하고 있는가에 대해 정확히 이해해야 한다. 셋째, 교실에서 화법 평가 방법으로 많이 사용되는 ‘분석적 평가’의 틀로 설득력을 포착할 수 없는 담화의 특성 및 유형이 존재한다는 사실에 대한 추가적 논의가 필요하다. Either peer review or mutual assessment has been applied to an education field of persuasive discourses, but there has been little study on criteria or methods for which an audience assesses a speaker’s discourse. In this paper, the audience carried out a discourse assessment on college students’ persuasive discourses in two ways, and these two assessment results were compared with each other. Out of 21 discourses, it was found that 3 discourses had a statistically significant difference between analytic assessment results and impact assessment results. It was found that two factors were related to such different assessment results as a result of considering the audience’s report on assessment reasons and performing discourse analysis, and those two factors were 1) novelty of a subject recognized by the audience and 2) the audience’s trust in grounds for the subject through a speaker’s experiences and examples.
최영인,노경희 한국외국어대학교 외국어교육연구소 2020 외국어교육연구 Vol.34 No.3
The purpose of this study is to examine the effects of critical incidents on the primary school students’ intercultural communicative competence(ICC). This study poses two research questions. First, do critical incident activities lead to the development of an elementary school student’s intercultural communicative competence? Second, when implementing critical incident activities, what is more effective in improving ICC — engaging students in a dialogue or having students role-play? To test these questions, an experiment was conducted with 74 sixth-grade students. The analyses showed that, as critical incident activities appear to improve the intercultural communicative competence of elementary school students, their application would be beneficial in culture classes. Meanwhile, there were no statistically significant differences in the effect of the two methods used to carry out critical incident activities. This paper concludes that, implementing critical incident activities in elementary school English classes will allow students to develop lifelong intercultural communicative competence by experiencing critical incidents through diverse activities, while also developing their English communication skills. 본 연구의 목적은 결정적 사건 활동이 초등 학습자의 문화 간 의사소통능력에 미치는 영향을 분석하는 데 있다. 구체적으로는 결정적 사건 활동이 초등 학습자의 문화 간 의사소통 능력 신장에 영향을 미치는지, 그 영향이 결정적 사건의 적용 방식(사건 기술문, 역할놀이) 또는 학습자 수준에 따라 차이가 있는지 알아보고자 한다. 이를 위해 6학년 학생 74명을대상으로 6차시에 걸친 실험 수업을 진행하였다. 분석 결과 결정적 사건활동은 초등 학습자의 문화 간 의사소통 능력 신장에 긍정적 영향을 미친다는 것을 확인하였다. 그리고 결정적 사건 활동을 수업에 적용할 때문화 간 의사소통 능력에 미치는 영향은 사건 기술문과 역할놀이 간 차이가 없는 것으로 드러났다. 따라서 다양한 활동과의 결합, 언어적 학습목표와의 결합을 통해 꾸준한 훈련을 한다면 학생들의 문화 간 의사소통능력을 효과적으로 신장시킬 수 있을 것이다.
최영인,안재명 한국항공우주학회 2018 International Journal of Aeronautical and Space Sc Vol.19 No.1
Earned value management (EVM) is a methodology for monitoring and controlling the performance of a project based on a 1 comparison between planned and actual cost/schedule. This study proposes a concept of hybrid earned value management (H-EVM) that integrates the traditional EVM metrics with information on the technology readiness level. The proposed concept can reflect the progress of a project in a sensitive way and provides short-term perspective complementary to the traditional EVM metrics. A two-dimensional visualization on the cost/schedule status of a project reflecting both of the traditional EVM (long-term perspective) and the proposed H-EVM (short-term perspective) indices is introduced. A case study on the management of a new space launch vehicle development program is conducted to demonstrate the effectiveness of the proposed H-EVM concept, associated metrics, and the visualization technique.