컴퓨터 적응검사에 대한 노출문항 효과

임은영(Lim, EunYoung) 한국교육평가학회 2014 교육평가연구 Vol.27 No.1

본 연구의 목적은 컴퓨터 적응검사에서 사전에 노출된 문항이 수험자의 능력 추정에 어떤 영향을 주는 지 탐색하는 것이다. 노출된 문항이 수험자의 능력을 과대 추정하겠지만, 그 정도에 대한 객관적인 연구가 미미하다. 본 연구에서는 컴퓨터 적응검사 시뮬레이션을 통해 노출문항의 영향력을 구체적으로 확인하고자 하였다. 문항선택 방법으로 최대문항정보선택법(MI), a-다층화 방법(AS)과 더불어 문항 노출을 조정하는 심슨-해터 방법(MISH, ASSH)을 사용하였고 노출된 문항 오답의 정답 전환률을 0%~100%로 설정하여 그에 따른 측정의 정확성과 문제은행의 활용도를 확인하였다. 그 결과 노출된 문항이 존재하지 않을 때, MI의 측정의 정확성이 가장 좋았지만 문제은행 활용도는 낮았다. 그러나 전환률이 증가할수록 ASSH, AS, MISH 순으로 측정의 정확성이 좋았다. 일단 노출된 문항이 수험자의 능력 추정에 영향을 주기 시작하면 측정의 정확성을 재는 bias와 MSE가 급격히 높아지고 문제은행의 활용률의 척도인 X²도 높아져 문제은행의 활용이 경직됨을 알 수 있었다. 능력추정 정확성과 문제은행 활용률을 고려할 때, 고부담 시험의 경우 ASSH, AS가 MI, MISH보다는 검사 보안을 위해서 더 적절한 문항선택 방법일 수 있다. The purpose of this research is to explore the effect of artificially compromised items for computerized adaptive testing. It is obvious for the compromised items to overestimate examinee's ability, but there are not many empirical researches to support our guess. For this study, I performed the simulation study to explore the effect of compromised items with maximum information item selection method(MI), a-stratified multi stage method(AS), and the Sympson-Hetter method incorporated with these two item selection methods(MISH, ASSH). The change rates of compromised items from a wrong response to a right response have been set as 0%~100%. Along with the change rates, bias and MSE for measurement precision and X² for item bank's usages were compared. When an item bank did not have compromised items, MI showed the lowest bias and MSE, but the highest X². However, as the change rates have been increased, MI's bias and MSE dramatically increased. Also biases and MSE's of other algorithms dramatically increased, but ASSH and AS showed lower bias, MSE, X² than MI and MISH did. Thus, for high stake tests, ASSH and AS might be more appropriate algorithms than MI and MISH to protect test security.

한 영 의문문 화행의 실현 양상에 관한 대조 연구

임은영(Lim Eunyoung) 한국문화융합학회 2021 문화와 융합 Vol.43 No.5

The purpose of this study is to find out what differences exist in the ways in which the interrogative sentence speech-acts of Korean and English are realized according to gender, intimacy, and social status. For this, this study analyzed and contrasted the interrogative sentence speech-acts of both countries according to gender, intimacy, and social status, using films and dramas originally based in Korea and remade in the United States as analysis material. However, in this study, contexts of situation that are not identical or similar between Korean and English were excluded from the analysis, and only interrogative sentence speech-acts performed in the same or similar context of situation between Korean and English were analyzed and compared according to social variables. As a result, the interrogative sentence response speech-acts performed by Korean women in an intimate and socially parallel relationship, such as among friends, showed the most remarkable difference from English, followed by a large difference in the interrogative sentence statement speech-act performed by the upper social group of Korean speakers. Therefore, this article proposed to American Korean learners the necessity of making efforts to develop a sufficient understanding of how the response speech-act and statement speech-act of Korean interrogative sentences are used in actual communication to serve as a catalyst for dialogue, and their ability to use them. In addition, this article proposed to Korean language education that it is necessary to contribute to the accumulation of practical data through more active research on the response speech-act and statement speech-acts of Korean interrogative sentence, and the data accumulated in this way should be actively reflected in the development of textbooks and syllabuses for the response speech-act and statement speech-act of Korean interrogative sentence.

한국어 의문문 화행에 관한 통계 연구: 드라마와 영화를 중심으로

임은영 ( Eunyoung Lim ) 사단법인 아시아문화학술원 2021 인문사회 21 Vol.12 No.2

본고는 한국어 의문문 화행 교육을 위한 기초 자료 축적에 기여하고자 한국 드라마와 영화 속 의문문 발화(3,338개)를 분석하였다. 즉 본고는 상황별 화자의 핵심 의도에 따라 8개 화행(Qa, Qp, Sa, Sp, Oa, Op, Ra, Rp)으로 분류한 후, 사회적 변인(성별/친밀도/사회적 지위)에 따라 교차 분석하여 카이제곱(χ2) 검정을 시행하였다. 그 결과, 사회적 변인에 따른 한국어 의문문 화행의 실현 양상에 유의미한 차이가 전체적으로 있음이 밝혀졌고, 더 나아가 세부적으로는 ‘Qa, Qp, Oa, Op, Ra’에서 사회적 변인에 따른 유의미한 차이가 다시 한 번 더 밝혀졌다. 본고는 ‘Qa, Qp, Oa, Op, Ra’에 대한 심화ㆍ보완된 연구로 기초 자료 축적에 기여할 것을 한국어 교육에 제언한다. This paper analyzed interrogative sentence utterances (3,338) in Korean dramas and movies in order to contribute to the accumulation of basic data for education of Korean interrogative sentence speech act. In other words, this paper classified into 8 speech acts (Qa, Qp, Sa, Sp, Oa, Op, Ra, Rp) according to the speaker’s core intention by situation, and then crosses according to social variables (gender/intimacy/social status). After analysis, a chi-square (χ2) test was performed. As a result, it was found that there was a significant difference in the realization pattern of Korean interrogative sentence speech act according to social variables overall, and in detail, in ‘Qa, Qp, Oa, Op, Ra.’ This paper suggests that Korean education will contribute to the accumulation of basic materials through more in-depth and complementary research on ‘Qa, Qp, Oa, Op, Ra.’

리메이크 영화와 드라마 속 한 미 남녀 발화의 비교문화적 화행 연구 : 한국어 의문문 지시화행을 중심으로

임은영(Lim Eunyoung) 한국문화융합학회 2021 문화와 융합 Vol.43 No.9

이 글은 한국이 원작이고 미국에서 리메이크 한 영화와 드라마를 바탕으로, 한국 남녀 화자의 ‘의문문 지시화행’이 미국 남녀 화자의 발화에서 어떻게 실현되는가를 (유사하거나 동일한 상황 맥락에서) 분석한 후, 한 미 양국 남녀 화자의 발화에 관한 대조 연구을 한다. 이러한 연구의 목적은 한 미 남녀 발화 및 화행의 실현 양상에나타나는 차이점과 공통점을 밝히고, 이러한 발화 및 화행의 차이에 영향을 미치는 사회문화적 요인을 밝히는 것이다. 이를 위해, 이 글에서는 먼저 한국 원작에서 ‘의문문 지시화행’을 살핀 후, 미국 리메이크에서 남녀 발화와화행을 (유사하거나 동일한 상황 맥락에서) 살폈다. 그리고 한 미 발화 및 화행에 나타난 언어적 특수성에 관한대조 분석을 하였다. 이때 양국의 발화 및 화행에 영향을 미치는 사회문화적 요인도 대조 분석에 포함하였다. 그결과, 한 미 남녀 발화의 문장 형식 화행 화법에는 뚜렷한 차이가 있고, 이러한 차이는 고맥락 저맥락, 개인주의, 불확실성 회피, 남성성과 같은 사회문화적 요인에서 비롯된 것임을 확인하였다. This article analyzes how Korean men and women’s ‘Interrogative Sentence Order Speech Acts’ are realized in the utterances of American men and women, based on Korean original works and remakes in the America, and conducts a contrast study. Through this, this study aims to clarify differences and commonalities in the realization patterns of Korean and American men and women’s utterances, and speech acts, and to clarify socio-cultural factors that influence these differences. For this, this article first analyzed the ‘Interrogative Sentence Order Speech Acts’ of men and women in the original Korean work, and then the utterances and the speech acts of men and women in the American remake ‘in the context of a similar or the same situation’. And the comparison analysis was conducted. At this time, the socio-cultural factors that influence the utterances and speech acts of both countries were also analyzed. In conclusion, it was confirmed that there are clear differences in sentence form, speech act, and speech style of the utterances of the Korean and American men and women, and these differences originate from sociocultural factors such as high context, low context, individualism, avoidance of uncertainty, and masculinity.

한·미 의문문 화행에 나타난 성별의 차이에 관한 연구

임은영 ( Eunyoung Lim ) 사단법인 아시아문화학술원 2021 인문사회 21 Vol.12 No.3

The purpose of this study is to clarify the differences in I.S.S.A. (Interrogative-Sentence-Speech-Act) between Korean-American gender. To this end, this paper extracted discourses in the ‘same or similar context’ between Korean-American from the remake works, and then classified all interrogative sentence into four S.As. (Q, S, O, R: Question- speech-act of interrogative-sentence (Q), Statement-speech-act of interrogative- sentence (S), Order-speech-act of interrogative-sentence (O), Response-speech-act of interrogative-sentence (R)). And the chi-square test was conducted. As a result, there was no significant difference in Korean, but there was a significant difference in American, in particular, a high significant difference in the American ‘O’. This result implies the possibility of pragmatic failure in the Korean ‘O’ of the Americans learning Korean. Therefore, this paper suggests the need of the education on the Korean ‘O’ for Americans learning Korean and the future research tasks.

가로환경 색채계획 방법에 관한 사례연구

임은영(Lim Eunyoung),이지은(Lee Jieun) 한국색채학회 2004 한국색채학회 논문집 Vol.18 No.3

영어교사 역량 척도 개발 및 타당화

임수연 ( Yim,Su Yon ),임은영 ( Lim,Eunyoung ) 글로벌영어교육학회(구 호남영어교육학회) 2019 Studies in English education Vol.24 No.1

This study aimed to develop and validate a competency inventory for English teachers working from the primary school level to high school. The inventory was developed in three stages. During the first stage, a preliminary inventory was developed based on previous studies related to English teachers’ professionalism and examined them for content validity. The preliminary inventory consisted of three categories with 132 items: general competency for English teachers, subject-specific competency for English teachers, and affective competency. During the second stage, sub-factors of the three factors were explored. Finally, during the third stage, construct validity was evaluated using exploratory factor analysis. The English Teachers’ Competency Inventory (ETCI) that was developed in this study consists of three factors with 46 items. It is hoped that the ETCI can be used to provide foundational data for enhancing competency levels among English teachers.

학업성취도 평가 결과에 나타난 초ㆍ중학생의 정의적 특성에 대한 종단분석과 예측

김경희(Kim, Kyunghee),임은영(Lim, EunYoung),신진아(Shin, JinAh) 한국교육평가학회 2013 교육평가연구 Vol.26 No.5

본 연구의 목적은 전수평가를 기반으로 한 ‘국가수준 학업성취도 평가(이하 학업성취도 평가)’ 결과를 활용하여 학생의 정의적 특성을 파악하고 더 나아가서는 정의적 특성을 예측하는 교육맥락변인을 탐색함으로써 정의적 특성 함양을 위한 교육적 지원방안을 모색하는 것이다. 우선, 정의적 특성의 종단분석을 위해 2009년부터 2012년까지의 학생들의 정의적 특성 변화 추이를 분석하였고, 정의적 성취 우수 학교의 특성을 예측하는 교육맥락변인을 다항 로지스틱 회귀분석을 통해 탐색하였다. 연구 결과에 따르면, 첫째, 교사 관계 및 교우관계의 정의적 특성은 연도별로 감소 추세가 보였지만 수업태도와 관련된 정의적 특성은 증가 추세를 보였다. 그러나 2009년에 부정 응답한 학생들이 2012년에 긍정 응답으로 전환된 비율이 높았고, 긍정 응답으로 전환된 학생들의 학업성취도가 부정 응답을 유지하는 학생들에 비해 더 향상되었다. 둘째, 정의적 성취 우수학교, 즉 2년 연속 상위에 속한 학교를 예측하는 변인은 초등학교에서는 학업성취도, 학부모풍토, 교우관계, 학교풍토, 수업태도, 부모와의 대화 정도, 가족과의 취미생활 정도, 동아리 수, 공모제교장 여부, 국ㆍ공립학교, 교장의 성별이었고, 중학교에서는 학업성취도, 학교풍토, 수업태도, 가족과의 취미생활 정도, 동아리 수, 학부모 풍토, 남학교, 여학교, 학생풍토였다. The purpose of this study is to evaluate and explore the affective characteristics of grade 6 and grade 12 students in Korea based on the results of the National Assessment of Educational Achievement (NAEA). First, the trends of students' affective characteristics in 2009-2012 were analyzed using cohort data and panel data. Second, in order to investigate the education context variables to predict positive or negative schools in terms of affective domain for two consecutive years, multinomial logistic analysis was employed. The results of trend analysis across 4 years show that the affective domain related to relationships with friends or teachers declined, but the affective domain related to class or subject attitude seems to have increased. In addition, of students who responded negatively in 2009, there were more students who converted their negative response to a positive response by 2012 than there were students who maintained the negative response. Second, the number of prediction variables for the positive schools is larger than that of the negative schools.

검사 자동 구성을 위한 선형계획법과 가중편차법의 효율성 비교

박도영(Doyoung Park),임은영(Eunyoung Lim),박상욱(Sangwook Park),시기자(Kija Si),이용상(Yongsang Lee) 한국교육평가학회 2013 교육평가연구 Vol.26 No.1

본 연구는 검사 자동 구성(ATA)에 적용되고 있는 대표적인 알고리듬인 선형계획법(LP)과 가중편차법(WDM)의 알고리듬에 대한 이론적인 배경을 개관하고 상용 프로그램을 이용하여 두 알고리듬의 효율성을 비교하였다. 가상 및 실제 문제은행을 대상으로 8개 검사형을 자동 구성하였으며 목적함수를 설정하는데 있어서 b-모수 평균을 사용하는 방법과 능력수준별 검사정보를 사용하는 방법을 사용하였다. 분석 결과에 의하면, 전반적으로 LP가 WDM보다 우수한 성능을 보였고, LP로 ATA를 실시할 경우 어떤 목적함수를 사용하느냐에 따라 검사의 측정학적인 속성이 다르게 구성되는 것으로 나타났다. 검사의 측정학적인 동형성이 자동 구성의 주된 목적이라면 동형성과 관련된 가용한 측정학적 정보를 최대한 반영하여 목적함수를 설정해야 한다는 사실도 확인되었다. 자동 구성에 소요되는 시간의 경우 두 알고리듬 간에 큰 차이는 없었다. 마지막으로 본 연구의 제한점과 후속 연구에 대해 논의하였다. This study investigated the comparative efficiencies of Linear Programming (LP) and Weighted Deviation Method (WDM) algorithms applied to the Automated Test Assembly (ATA). By using commercial softwares, eight test forms were automatically constructed in simulated and real item bank conditions while applying two objective functions; the mean of b-parameters and the test informations at five ability levels. The results generally indicate that LP outperformed WDM. When LP was applied, it was confirmed that psychometric properties of multiple test forms differed depending on which objective function was used. It was also found that the objective function should, as much as possible, include the psychometric informations related to test parallelism, if the main purpose of the ATA is to create parallel test forms. Time consumptions for the ATA between LP and WDM were similar. Limitations of this study and future research topics were discussed, finally.

IPA 기법을 활용한 영어교사 역량의 중요도와 실행도 분석

임수연(Yim, Su Yon),임은영(Lim, EunYoung) 한국영어교과교육학회 2021 영어교과교육 Vol.20 No.4

This study analyzes the importance and performance level of English teachers’ competencies to find ways to enhance English teachers’ competencies. For this, a total of 602 English teachers representing three school levels, from primary schools to high school, responded to a survey which consisted of 12 competency factors. The results are as follows. First, the level of importance they assigned the twelve competencies was high compared with the level of performance. Second, twelve competencies fall into four categories: ‘concentrate here’ (four competencies), ‘keep up the good work’ (two competencies), ‘low priority’ (four competencies), and ‘possible overkill’ (two competencies). The results identified focus areas to enhance English teachers’ competencies and suggest some principles to improve in-service teachers’ training programmes.