온라인 소비자물가지수 작성을 위한 온라인 가격 데이터 정제에 관한 연구 = A study on filtering of online price data for creating an online consumer price index

국문 초록 (Abstract)

국가 통계로 활용되고 있는 소비자 물가지수(CPI)는 전국적으로 오프라인 대형 마켓 위주의 현장 조사이기 때문에 많은 시간과 비용을 소비하고 있다. 그리고 최근에는 많은 소비자들의 구매 패턴이 오프라인 마켓에서 온라인 마켓으로 이동하고 있어 온라인 소비자 물가지수의 개발이 필요한 시점이다. 그러나 아직까지 국내에서는 온라인 부분의 소비자 물가지수에 대한 연구가 더디게 진행되고 있다.
온라인 소비자 물가지수는 일반적으로 인지도가 높은 온라인 마켓에서 웹크롤링을 통해 대량의 데이터를 수집하여 안전한 저장소에 저장하고 물가지수의 정확성을 위해 수집된 데이터를 정제한다. 그리고 정제된 데이터를 계산식에 적용하여 물가지수를 작성하는 등 많은 복잡한 과정이 필요하다. 이러한 과정 중 특히 수집된 온라인 가격 정보를 정제하는 작업은 최종 물가지수의 정확성을 위해서 매우 중요하다. 따라서 본 연구에서는 온라인 가격의 특성을 파악하고 이에 따른 정확한 물가지수 산출을 위한 데이터 정제 방안을 제시하고자 한다.

다국어 초록 (Multilingual Abstract)

The Consumer Price Index(CPI), used for official statistics, is costly and time consuming due to the fact that it is the result of field investigations. And nowadays, amounts of online consumption are growing more than those of offline. In spite of the need of developing the Online Consumer Price Index, it still progresses slowly within the country.
The Online Consumer Price Index is made through much complicated processes. First, we need to collect data from generally popular online market by web crawling. These data are saved in storage of safety which is available to store large amounts of data. Next, they need to be cleaned for accurate measures of the Online Consumer Price Index. Lastly, we need to apply those data to certain formula to generate the Online Consumer Price Index. In particular, data cleaning is much important process to generate accurate numerical values of the Online Consumer Price Index. Therefore, this study figures out the peculiarities of online prices and suggests the way to clean data for the exactitude Online Consumer Price Index.

목차 (Table of Contents)

• 제 1 장 서론 1
• 1.1 현 소비자물가지수의 한계 1
• 1.2 온라인 소비자물가지수의 현황 3
• 1.3 현 소지자물가지수(CPI)와 온라인 소비자물가지수 7
• 제 2 장 본론 8
• 2.1 온라인 수집 가능 가격 데이터 8
• 2.2 기초 데이터 분석 10
• 2.3 온라인 가격 데이터의 문제점 14
• 2.4 온라인 가격 데이터 정제 방안 16
• 2.4.1 분류 알고리즘의 적용 18
• 2.4.2 비정상적인 가격의 상품 정제 22
• 2.4.3 가격 변동이 큰 상품 정제 25
• 2.5 데이터 정제 결과 27
• 2.6 데이터 정제 전/후의 온라인 소비자물가지수 비교 29
• 제 3 장 결론 37
• 참고문헌 39