한국어 학습자 발화에 대한 발음 평가 API와 한국어교육 전문가의 평가 비교 = Comparison of an Evaluation of Korean Learners’ pronunciation by API and Korean education experts

다국어 초록 (Multilingual Abstract)

The purpose of this study is to examine the currently developed Korean pronunciation evaluation technology for the pronunciation evaluation of Korean learners and to find ways to use it in Korean language education. To this end, the evaluation score of the pronunciation evaluation API and the evaluation score of 10 Korean education experts were compared to find out how accurate the Korean pronunciation evaluation technology is. The main work of the study consisted of four stages. First, the voice data of Korean learners was collected, and then the pronunciation evaluation API was implemented and tested. In addition, a Korean education experts were recruited to request pronunciation evaluation, and finally, the performance of the pronunciation evaluation API was evaluated through result analysis. As a result of the evaluation, the evaluation of the pronunciation evaluation API with the Korean education experts showed a high correlation in Korean speech with prommpted text, while there was no correlation in Korean speech without prompted text. If the pronunciation evaluation technology is further supplemented and the Korean pronunciation evaluation system is developed, it is expected that it can be used in various ways in teaching pronunciation and pronunciation evaluation in the Korean education field.

국문 초록 (Abstract)

본 연구의 목적은 한국어 학습자의 발음 평가를 위해 현재 개발되어 있는 한국어 발음 평가 기술을 살펴보고 한국어교육에서의 활용 방안을 모색하는 데에 있다. 이를 위해, 본 연구에서는 한국어 발음 평가 기술이 어느 정도의 정확성을 확보하고 있는지를 알아보기 위해 발음 평가 API의 평가 점수와 한국어교육 전문가 10인의 평가 점수를 비교해 보았다. 연구의 주요 작업은 네 단계로 이루어졌다. 먼저, 한국어 학습자의 음성데이터를 수집하고 다음으로 발음 평가 API를 구현하고 테스트해 보았다. 그리고 한국어교육 전문가를 섭외하여 발음 평가를 의뢰하였고, 마지막으로 결과 분석을 통해 발음 평가 API의 성능을 평가해 보았다. 평가 결과, 한국어교육 전문가와 발음 평가 API의 평가는 문장 읽기 발화에서 높은 상관성을 보인 반면, 자유 발화 음성에서는 상관성이 전혀 나타나지 않았다. 앞으로 발음 평가 기술이 좀 더 보완되어 한국어 발음 평가 시스템이 개발된다면 한국어교육 현장에서도 발음 교육 및 발음 평가에서 다양하게 활용할 수 있을 것으로 기대된다.

참고문헌 (Reference)

1 국립국어원, "한국어 표준 교육과정"

2 이향, "한국어 발음 교육 목표와 교육 내용 재고를 위한 실험연구" 국제한국어교육학회 28 (28): 105-126, 2017

3 윤태진 ; 강윤정, "한국어 대용량발화말뭉치의 단모음분석" 한국음성학회 6 (6): 139-145, 2014

4 원미진, "제4차 한국어능력시험 말하기 평가 개발 연구" 국립국제교육원 2017

5 이미향, "음성 인식 기술(Speech Recognition)을 기반으로 한 한국어 학습자의 발음 진단・평가 시스템 구축 방안 연구" 88-98, 2021

6 신상근, "외국어교육 연구방법론" 한국문화사 2014

7 성태제, "알기 쉬운 통계분" 학지사 2018

8 오유리 ; 박기영 ; 전형배 ; 박전규, "Automatic proficiency assessment of Korean speech read aloud by non‐natives using bidirectional LSTM‐based speech recognition" 한국전자통신연구원 42 (42): 764-775, 2020

9 Xi, X., "Automated scoring of spontaneous speech using SpeechRaterSM v1.0" ETS i-102, 2008

10 Chen, L., "Automated Scoring of Nonnative Speech Using the SpeechRaterSM v. 5.0 Engine" ETS 1-31, 2018

11 이윤경, "4차산업혁명과 인공지능 영어교육" 한국문화사 298-315, 2019

12 이승환, "4차 산업혁명과 인공지능 영어교육" 한국문화사 32-56, 2019