http://chineseinput.net/에서 pinyin(병음)방식으로 중국어를 변환할 수 있습니다.
변환된 중국어를 복사하여 사용하시면 됩니다.
자연어 처리를 위한 조건부 게이트 다층 퍼셉트론 모델 개발 및 구현
손규진 ( Guijin Son ),김승원 ( Seungone Kim ),주세준 ( Se June Joo ),조우진 ( Woojin Cho ),나정은 ( Jeongeun Nah ) 한국정보처리학회 2021 한국정보처리학회 학술대회논문집 Vol.28 No.2
2018 년 Google 사의 사전 학습된 언어 인공지능 BERT 를 기점으로, 자연어 처리 학계는 주요 구조를 유지한 채 경쟁적으로 모델을 대형화하는 방향으로 발전했다. 그 결과, 오늘날 자연어 인공지능은 거대 사기업과 그에 준하는 컴퓨팅 자원을 소유한 연구단체만의 전유물이 되었다. 본 논문에서는 다층 퍼셉트론을 병렬적으로 배열해 자연어 인공지능을 제작하는 기법의 모델을 제안하고, 이를 적용한‘조건부 게이트 다층 퍼셉트론 모델(SG-MLP)’을 구현하고 그 결과를 비교 관찰하였다. SG-MLP 는 BERT 의 20%에 해당하는 사전 학습량만으로 다수의 지표에서 그것과 준하는 성능을 보였고, 동일한 과제에 대해 더 적은 연산 비용을 소요한다.