Evaluation of Classification Algorithm Performance of Sentiment Analysis Using Entropy Score

박만희,Park, Man-Hee The Korea Institute of Information and Commucation 2018 한국정보통신학회논문지 Vol.22 No.9

다양한 온라인 고객 평가 및 소셜 미디어 정보는 고객의 의사결정에 영향을 미치기 때문에 기업에게 매우 중요한 정보 출처라고 할 수 있다. 설문 조사를 통해 고객의 다양한 요구와 불만 사항을 파악하는 데는 많은 비용과 시간적인 제약이 발생하고 있다. 온라인 쇼핑몰의 고객 후기 데이터는 제품에 대한 고객들의 감성을 분석할 수 있는 이상적인 자료를 제공하고 있다. 본 연구에서는 삼성과 애플 스마폰에 대한 감성분석을 위해 아마존 쇼핑몰로부터 고객 리뷰 데이터를 수집하였다. 선행 연구에서 대표적인 감성분석 기법으로 사용된 5가지 분류 알고리즘을 적용하였다. 5가지 분류알고리즘은 support vector machines, bagging, random forest, classification or regression tree, maximum entropy 등이다. 본 연구에서는 분류 알고리즘의 수행도를 종합적으로 평가할 수 있는 entropy score를 제안하였다. Entropy score를 이용하여 5가지 알고리즘을 평가한 결과에 따르면 support vector machines 알고리즘의 entropy score가 가장 높은 것으로 분석되었다. Online customer evaluations and social media information among a variety of information sources are critical for businesses as it influences the customer's decision making. There are limitations on the time and money that the survey will ask to identify a variety of customers' needs and complaints. The customer review data at online shopping malls provide the ideal data sources for analyzing customer sentiment about their products. In this study, we collected product reviews data on the smartphone of Samsung and Apple from Amazon. We applied five classification algorithms which are used as representative sentiment analysis techniques in previous studies. The five algorithms are based on support vector machines, bagging, random forest, classification or regression tree and maximum entropy. In this study, we proposed entropy score which can comprehensively evaluate the performance of classification algorithm. As a result of evaluating five algorithms using an entropy score, the SVMs algorithm's entropy score was ranked highest.

인천 1호선전철 역세권의 변화 및 개발에 관한 연구

박만희,안경수,Park. Man-Hee,Ahn. Kyung-Su 한국방재학회 2009 한국방재학회논문집 Vol.9 No.3

인천광역시는 1999년 10월 도시철도1호선 개통에 따른 역세권 개발은 대규모 도시계획사업이지만 역주변의 토지이용을 특성화 하지 못하여서 교통 혼잡 발생과 이용자의 불편을 초례하고 도시문제가 개선되기 못하고 심화되고 있다. 따라서 본 연구는 인천 1호선 전철의 역세권 주변 인구 및 토지이용현황 등을 분석하여 도시전체에 대한 합리적인 기능의 배분과 적정한 개발수준을 결정하기 위해 각 역세권의 기능과 목적을 고려하였다. 각각의 역세권 유형별 특성변화를 분석하여 향후 건설될 역세권에 대한 건설로 발생하게 될 파급효과와 교통 및 토지이용의 변화를 고려한 통합적이고 특성화된 역세권 개발 방향을 제시하고자 한다. The 1st Incheon Rapid Transit Line opened in October, 1999. However, the current development plans for areas near stations do not involve plans for the both urban planning and transportation together. As the focus on only the aspect of installing a new transportation mode, the developments even make the problems such as reckless development and traffic congestion gets worse. It is required to analyse status of the current land uses and land use plans in the future and consider distribution of functions of the areas near stations and aims of development plans so as to harmonize the functions of each region in view of making balance in the whole city. The aims of developments of areas near stations has to focus on the study follows steps to find and suggest aims and strategies for the revitalization plan for areas near stations with considering the both transportation and land uses together. The plans for the areas near stations of the Incheon 1st Rapid Transit Line are analysed and then the features and rational strategies are derived. The impact is analysed as applying the development strategies derived from the step into the areas near the stations of Incheon 1st Rapid Transit line.

유창성 일반화 프로그램을 위한 웹기반 유창성 평가시스템 개발

박만희(Man Hee Park) 한국언어치료학회 2012 言語治療硏究 Vol.21 No.3

Disfluency in speech has already been analyzed from different points of views, either linguistic, cognitive, or engineering. But a web-based system to test and evaluate fluency for people who stutter does not exist. This study aims to develop a web-based system which tests and evaluates disfluency. The web-based supporting system developed in this study was FTES(Fluency Test and Evaluation System). The FTES supports both TTS(Text-To-Speech) and conversion service of voice to mp3 file. Also, the evaluation service supports pathological disfluency and normally disfluency. It provides 10 key services such as management of fluency index, test of fluency, evaluation of fluency, management of results, and common service.

DEA 교차 효율성 모형에서 벤치마킹정보 제공방법

박만희(Park, Man Hee) 글로벌경영학회 2021 글로벌경영학회지 Vol.18 No.1

DEA(Data Envelopment Analysis)는 생산함수에 대한 가정없이 조직의 상대적인 효율성을 평가 하는 비모수적 기법으로 다양한 분야에서 활용되어 오고 있다. CCR과 BCC 모형은 효율성이 1인 DMU(Decision Making Units)가 다 수개로 분석되어 변별력이 낮다는 문제점을 가지고 있다. 이러한 변별력 문제를 해결하기 위해 DMU들간의 효율성 순위를 제공할 수 있는 교차 효율성 모형이 활용되고 있다. 하지만 교차 효율성 모형은 비효율적인 DMU가 효율적인 DMU로 되기 위한 벤치마킹 정보를 제공할 수 없다는 단점을 가지고 있다. 따라서 본 연구에서는 교차 효율성 모형 에서 벤치마킹 정보를 제공하는 방법을 제시하였다. 본 연구의 결과를 요약하면 다음과 같다. 첫째, Shannon의 엔트로피 개념에 기반한 중요도 지수를 이용하여 변별력이 가장 높은 교차효 율성 모형을 제시하였다. 분석결과에 따르면 Aggressive, Arbitrary, Benevolent 모형 중 Aggressive 모형의 변별력이 가장 높은 것으로 나타났다. 둘째, 비효율적인 DMU가 벤치마킹해야할 참조 DMU를 선정하기 위해 군집분석을 적용하였으며 실루엣 지수를 이용하여 최적 군집수 결정방법을 제시하였다. 셋째, 군집분석 결과를 히트맵과 덴드로그램으로 가시화하여 비효율적인 DMU가 벤치마킹해야 할 DMU를 쉽게 확인할 수 있도록 하였다. 넷째, 벤치마킹의 수준을 제공 하기 위해서 주성분분석(Principal component analysis)을 이용하여 핵심 주성분을 도출하고 이를 바탕으로 투입요소와 산출요소별 벤치마킹 비율을 제공하였다. 본 연구에서는 군집분석과 주성분분석을 바탕으로 벤치마킹 참조집합과 변수별 벤치마킹 비율을 제공하였다. 또한 변별력 평가지표를 이용한 최적 모형 선정방법과 실루엣 지수를 이용한 최적 군집수 결정방법을 제시하였다. 본 연구는 교차 효율성 분석결과를 바탕으로 벤치마킹정보를 제공하는 방법을 제시하였다는 점에서 연구의의가 있다. DEA (Data Envelopment Analysis) has been used in various fields as a nonparametric technique to evaluate the relative efficiency of an organization without assumptions about production functions. The CCR and BCC models have a problem that the discrimination power is low because many DMUs (Decision Making Units) with an efficiency of 1 are analyzed. To solve this problem of discrimination, cross efficiency model that can provide an efficiency ranking among DMUs is used. However, the cross-efficiency model has a drawback that it cannot provide benchmarking information for an inefficient DMU to become an efficient DMU. Therefore, this work presents a method for providing benchmarking information in cross efficiency models. The summary of the results of this study is as follows. First, we present a cross efficiency model with the highest discrimination power using the importance index based on Shannon s entropy concept. According to the analysis results, it was found that the Aggressive model had the highest discrimination power among Aggressive, Arbitrary, and Benevolent models. Second, cluster analysis was applied to select the reference DMU to be benchmarked by the inefficient DMU, and a method for determining the optimal number of clusters was suggested using the silhouette index. Third, the cluster analysis results were visualized as heat maps and dendrograms so that inefficient DMUs could easily identify DMUs to be benchmarked. Fourth, in order to provide the level of benchmarking, the key principal components were derived using principal component analysis, and based on which the benchmarking ratio for each input and output variable was provided. In this study, based on cluster analysis and principal component analysis, a benchmarking reference set and a benchmarking ratio for each variable were provided. In addition, a method for selecting an optimal model using discriminative power evaluation index and a method for determining the optimal number of clusters using silhouette index are presented. This study is meaningful in that it presents a method for providing benchmarking information based on the results of cross efficiency analysis.

웹기반 효율성 분석시스템 개발

박만희(Park, Man Hee) 글로벌경영학회 2021 글로벌경영학회지 Vol.18 No.2

DEA(Data Envelopment Analysis, 자료포락분석)는 생산함수에 대한 가정 없이 다양한 조직의 효율성을 분석할 수 있는 비모수적 분석기법이다. DEA가 가진 장점으로 인해 지난 40년 동안 효율성 분석 기법으로 꾸준히 활용되고 있으며, 다양한 DEA 분석 소프트웨어가 개발되어 이용되고 있다. 무료 DEA 소프트웨어의 경우 분석모형이 부족하고 R 패키지의 경우 프로그램밍 기법을 학습해야 하는 단점이 존재한다. 따라서 다양한 DEA 분석모형과 효율성 및 생산성 변화 추이분석을 지원하면서 별도의 설치와 환경설정이 필요 없는 웹기반 효율성 분석시스템을 연구자들에게 제공하면 많은 도움이 될 것으로 판단된다. 본 연구에서는 다수 개의 투입 요소를 이용하여 다수 개의 산출물을 생산하는 조직의 효율성 분석을 지원할 수 있는 웹기반 효율성 분석시스템인 WebDEA를 개발하였다. 본 연구를 통해 개발된 WebDEA 시스템의 주요 특징과 기능을 요약하면 다음과 같다. 첫째, 효율성 점수에 있어서 유일한 순위를 제공할 수 있는 Super Efficiency 모형, Cross Efficiency 모형, Bootstrap DEA 모형을 지원하고, 음수 값을 가지는 데이터의 효율성 분석을 위해 SORM(Semi-Oriented Radial Measure) 모형을 지원한다. 둘째, 시간의 변화에 따른 효율성과 생산성 분석 기능을 제공하고 변화추세를 파악하기 위해서 DEA Window 분석과 Malmquist 생산성분석 기능을 제공한다. 셋째, 데이터 입력과 분석결과 관리 편의를 위해 엑셀 인터페이스 기능을 제공하고 분석결과에 대해서 line, bar, scatter, radar chart 기능과 그래프 저장 기능을 제공한다. 넷째, 사용자 인터페이스와 사용자 경험 향상을 위해 도움말 기능과 반응형 메시지 처리기능을 제공한다. 마지막으로 웹기반 애플리케이션을 제공함으로써 별도의 설치나 환경설정 없이 시스템 이용이 가능하다. DEA 분야에 관심이 있는 연구자들이 본 연구를 통해 개발된 WebDEA를 활용하여 효율성 및 생산성 분석 관련 연구가 활성화되고 양질의 연구성과가 창출되기를 기대한다. DEA (Data Envelopment Analysis) is a non-parametric analysis method that can analyze the efficiency of various organizations without assumptions about the production function. Due to the advantages of DEA, it has been continuously used as an efficiency analysis technique for the past 40 years, and various DEA analysis software has been developed and used. In the case of free DEA software, the analysis model is insufficient, and in the case of the R package, there are disadvantages of learning programming techniques. Therefore, it would be very helpful to provide researchers with a web-based efficiency analysis system that does not require separate installation and configuration while supporting various DEA analysis models and analysis of changes in efficiency and productivity. In this work, we develop WebDEA, a web-based efficiency analysis system that can support the efficiency analysis of organizations that produce multiple outputs using multiple input elements. The main features and functions of the WebDEA system developed through this study are summarized as follows. First, it supports the Super Efficiency model, the Cross Efficiency model, and the Bootstrap DEA model that can provide a unique ranking in the efficiency score, and the SORM (Semi-Oriented Radial Measure) model for the efficiency analysis of data with negative values. Second, DEA Window analysis and Malmquist productivity analysis functions are provided to provide efficiency and productivity analysis functions over time changes and to identify changes. Third, it provides an Excel interface function for data input and analysis result management convenience, and provides line, bar, scatter, radar chart functions and graph storage functions for analysis results. Fourth, it provides a help function and a responsive message processing function to improve the user interface and user experience. Finally, by providing web-based applications, the system can be used without installation or configuration. It is hoped that researchers interested in the field of DEA will use WebDEA developed through this study to facilitate research related to efficiency and productivity analysis and create high-quality research results.

DEA 효율성 및 Malmquist 생산성 분석시스템 개발

박만희 ( Man Hee Park ) 韓國生産性學會 2008 生産性論集 Vol.22 No.2

토픽 모델링을 이용한 고객 상품평 분석

박만희(Park, Man Hee) 글로벌경영학회 2021 글로벌경영학회지 Vol.18 No.4

본 연구에서는 고객들이 제품 구매 후기로 작성한 상품평 데이터를 바탕으로 토픽 모델링 기법중 하나인 LDA 기법을 적용하여 상품평을 분석하였다. 상품평 분석을 위해 amazon.com으로부터 Galaxy S20 스마트폰에 대한 상품평 데이터를 수집하고 토픽 모델링 분석을 수행하였으며 도출된 연구결과를 요약하면 다음과 같다. 첫째, 단어 빈도분석 결과에 따르면 Galaxy S20 스마트폰의 경우 배터리, 화면, 카메라, 가격, 속도, 지문인식 등의 기능에서 우수한 것으로 평가되었다. 둘째, 토픽 모델링 분석결과에 따르면 고객들이 만족하는 상위 5개 토픽은 지문인식, 합리적인 가격, 외장 메모리, 카메라 품질, 화면 성능인 것으로 분석되었다. 셋째, 토픽들간의 연관관계 분석결과에 따르면 고객들의 만족도에 영향을 미친 핵심 품질속성은 지문인식, 반응속도, 기기 성능으로 분석되었다. 또한 지문인식과 함께 배터리 수명을 동시에 언급한 상품평이 상대적으로 많이 존재하는 것으로 분석되었다. 본 연구에서 제시한 방법론을 적용하면 고객들의 만족도에 영향을 미치는 긍정적 품질요소와 부정적 품질요소를 분석할 수 있다. 따라서 제품 기획단계에서 토픽 분석결과를 활용하면 성공 가능성이 높은 제품을 기획할 수 있을 것이다. In this study, product reviews were analyzed by applying the LDA technique, one of the topic modeling techniques, based on product reviews written by customers. For product review analysis, product review data for the Galaxy S20 smartphone was collected from amazon.com and topic modeling analysis was performed. The results of the study are summarized as follows. First, according to the results of word frequency analysis, the Galaxy S20 smartphone was evaluated to be excellent in functions such as battery, screen, camera, price, speed, and fingerprint recognition. Second, according to the topic modeling analysis results, the top 5 topics that customers were satisfied with were fingerprint recognition, reasonable price, external memory, camera quality, and screen performance. Third, according to the association analysis results between topics, the key quality attributes that affected customer satisfaction were analyzed as fingerprint recognition, reaction speed, and device performance. In addition, it was analyzed that there are relatively many product reviews that mention fingerprint recognition and battery life at the same time. The application of the methodology presented in this study enables the analysis of positive and negative quality attributes that affect customer satisfaction. Therefore, using the topic analysis results in the product planning stage, it will be possible to plan a product with a high probability of success.

구조적 토픽모델을 이용한 AI분야 국가연구개발 동향 분석

박만희(Man-Hee Park) 한국콘텐츠학회 2023 한국콘텐츠학회논문지 Vol.23 No.12

인공지능은 4차 산업혁명 시대 핵심 성장동력이자 혁신을 주도하는 기술로 주목받고 있다. 정부차원에서도 AI기술의 중요성을 인식하고 국가연구개발 사업을 통해 전략적으로 투자해오고 있다. 본 연구에서는 2016년부터 2021년까지 국가연구개발 사업을 통해 AI분야에 지원된 연구개발과제 정보를 바탕으로 구조적 토픽모델(Structural topic model)을 이용하여 전체적인 연구토픽을 도출하고 AI분야 연구동향을 파악하였다. 분석결과에 따르면 연구 토픽은 20개 정도 형성하는 것으로 나타났고 4개 커뮤니티를 형성하는 것으로 분석되었다. 연도별 연구추세 분석을 위해 실시한 회귀분석 결과에 따르면 데이터 분류 알고리즘, 사용자 인지 및 영상콘텐츠 검색, 머신러닝 기반 분석 및 예측서비스는 연구비중이 감소하는 추세에 있는 cold topic으로 분석되었다. 딥러닝 모델과 경량화, SW 플랫폼 기술, 지능형 의료서비스, 멀티모달 딥러닝, 인재양성은 연구비중이 증가하는 추세에 있는 hot topic으로 분석되었다. Artificial intelligence is attracting attention as a key growth engine and innovation-leading technology in the era of the Fourth Industrial Revolution. The Korean government has recognized the importance of AI technology and has been investing strategically through national research and development projects. In this study, based on research and development program information supported in the AI field through national R&D projects from 2016 to 2021, the overall research topic was derived using a structural topic model and research trends in the AI field were identified. According to the analysis results, it was found that about 20 research topics were formed and analyzed to form 4 communities. The results of a regression analysis conducted to analyze research trends by year showed that data classification algorithms, user recognition and video content search, and machine learning-based analysis and prediction services were analyzed as cold topics with a decreasing trend in research proportion. On the other hand, deep learning models and lightweighting, SW platform technology, intelligent medical services, multimodal deep learning, and talent training were analyzed as hot topics with increasing research weight.

글로벌 냉매규제 변화에 대한 새로운 인식의 필요성

박만희(Man Hee Park) 대한기계학회 2023 대한기계학회 춘추학술대회 Vol.2023 No.11

인지평가 및 훈련을 위한 단어훈련평가시스템 개발

박만희(Man Hee Park) 한국언어치료학회 2014 言語治療硏究 Vol.23 No.1

This study aims to develop a computer-based application for cognitive assessment and training. The developed computer-based supporting system in this study is WTES(Word Training and Evaluation System). WTES constructed with standard word database using word lists based on previous study for infants and adults. This system automatically generates and allocates the order of priority for word lists using weight of importance, frequency, and complexity in word and manages the results during word training. Also, it supports 4 types of word evaluation which are word expression, word understanding, word memory and word fluency. Test items of these 4 types of evaluation are randomly and evenly distributed by the difficulty of words. In conclusion, the WTES is more convenient and systematic function than that of traditional tools and will increase the effectiveness of therapy in word training and evaluation.