주성분 보유수에 따른 중요 용어 추출의 비교 = Comparison of Significant Term Extraction Based on the Number of Selected Principal Components

다국어 초록 (Multilingual Abstract)

In this paper, we propose a method of significant term extraction within a document. The technique used is Principal Component Analysis(PCA) which is one of the multivariate analysis methods. PCA can sufficiently use term-term relationships within a document by term-term correlations. We use a correlation matrix instead of a covariance matrix between terms for performing PCA. We also try to find out thresholds of both the number of components to be selected and correlation coefficients between selected components and terms. The experimental results on 283 Korean newspaper articles show that the condition of the first six components with correlation coefficients of |0.4| is the best for extracting sentence based on the significant selected terms.

국문 초록 (Abstract)

문서를 구성하는 단어들은 서로 연관이 있다는 정보를 충분히 이용할 수 있는 다변량 분석 방법 중, 주성분분석(Principal Component Analysis)을 이용하여 중요 용어를 추출하고자 한다. 본 논문에서는 주성분분석의 분석 대상을 용어 사이의 공분산행렬이 아닌 상관행렬을 이용한다. 그리고, 중요 용어를 추출하기 위해서, 보유해야 할 주성분 개수와 주성분과 용어 사이의 상관계수에 대한 최적의 임계치를 찾고자 한다. 283건의 신문기사를 대상으로, 추출된 용어에 기반한 문장 추출 실험 결과, 첫 6개까지의 주성분과 상관계수 |0.4|라는 조건에서 가장 좋은 성능을 보였다.

참고문헌 (Reference)

1 한학용, "패턴인식개론-MATLAB 실습을 통한 입체적 학습" 한빛미디어 2005.

2 이창범, "주성분 분석과 비정칙치 분해를 이용한 문서 요약" 10-B (10-B): 725-734, 2003.

3 김재훈, "정보 추출의 기술 현황" 22 (22): 35 -46, 2004

4 강병서, "의사결정을 위한 현대통계학" 무역경영사 2004.

5 노형진, "다변량분석 이론과 실제" 형설출판사 2005.

6 김기영, "다변량 통계자료분석" 자유아카데미 1999.

7 W. H. Press, "Numerical Recipes in C++" Cambridge University Press 2002.

8 D. C. Manning, "Foundations of Statistical Natural Language Processing" Cambridge, MA：The MIT Press 1999.

9 I. Mani, "Automatic Summarization" John Benjamins Publishing Company 2001.