Evaluation of Classification Algorithm Performance of Sentiment Analysis Using Entropy Score

박만희,Park, Man-Hee The Korea Institute of Information and Commucation 2018 한국정보통신학회논문지 Vol.22 No.9

다양한 온라인 고객 평가 및 소셜 미디어 정보는 고객의 의사결정에 영향을 미치기 때문에 기업에게 매우 중요한 정보 출처라고 할 수 있다. 설문 조사를 통해 고객의 다양한 요구와 불만 사항을 파악하는 데는 많은 비용과 시간적인 제약이 발생하고 있다. 온라인 쇼핑몰의 고객 후기 데이터는 제품에 대한 고객들의 감성을 분석할 수 있는 이상적인 자료를 제공하고 있다. 본 연구에서는 삼성과 애플 스마폰에 대한 감성분석을 위해 아마존 쇼핑몰로부터 고객 리뷰 데이터를 수집하였다. 선행 연구에서 대표적인 감성분석 기법으로 사용된 5가지 분류 알고리즘을 적용하였다. 5가지 분류알고리즘은 support vector machines, bagging, random forest, classification or regression tree, maximum entropy 등이다. 본 연구에서는 분류 알고리즘의 수행도를 종합적으로 평가할 수 있는 entropy score를 제안하였다. Entropy score를 이용하여 5가지 알고리즘을 평가한 결과에 따르면 support vector machines 알고리즘의 entropy score가 가장 높은 것으로 분석되었다. Online customer evaluations and social media information among a variety of information sources are critical for businesses as it influences the customer's decision making. There are limitations on the time and money that the survey will ask to identify a variety of customers' needs and complaints. The customer review data at online shopping malls provide the ideal data sources for analyzing customer sentiment about their products. In this study, we collected product reviews data on the smartphone of Samsung and Apple from Amazon. We applied five classification algorithms which are used as representative sentiment analysis techniques in previous studies. The five algorithms are based on support vector machines, bagging, random forest, classification or regression tree and maximum entropy. In this study, we proposed entropy score which can comprehensively evaluate the performance of classification algorithm. As a result of evaluating five algorithms using an entropy score, the SVMs algorithm's entropy score was ranked highest.

국가과학기술종합정보서비스(NTIS)-국가R&D Board

박만희,Park, Man-Hui 한국과학기술정보연구원 2008 지식정보인프라 Vol.30 No.-

인천 1호선전철 역세권의 변화 및 개발에 관한 연구

박만희,안경수,Park. Man-Hee,Ahn. Kyung-Su 한국방재학회 2009 한국방재학회논문집 Vol.9 No.3

인천광역시는 1999년 10월 도시철도1호선 개통에 따른 역세권 개발은 대규모 도시계획사업이지만 역주변의 토지이용을 특성화 하지 못하여서 교통 혼잡 발생과 이용자의 불편을 초례하고 도시문제가 개선되기 못하고 심화되고 있다. 따라서 본 연구는 인천 1호선 전철의 역세권 주변 인구 및 토지이용현황 등을 분석하여 도시전체에 대한 합리적인 기능의 배분과 적정한 개발수준을 결정하기 위해 각 역세권의 기능과 목적을 고려하였다. 각각의 역세권 유형별 특성변화를 분석하여 향후 건설될 역세권에 대한 건설로 발생하게 될 파급효과와 교통 및 토지이용의 변화를 고려한 통합적이고 특성화된 역세권 개발 방향을 제시하고자 한다. The 1st Incheon Rapid Transit Line opened in October, 1999. However, the current development plans for areas near stations do not involve plans for the both urban planning and transportation together. As the focus on only the aspect of installing a new transportation mode, the developments even make the problems such as reckless development and traffic congestion gets worse. It is required to analyse status of the current land uses and land use plans in the future and consider distribution of functions of the areas near stations and aims of development plans so as to harmonize the functions of each region in view of making balance in the whole city. The aims of developments of areas near stations has to focus on the study follows steps to find and suggest aims and strategies for the revitalization plan for areas near stations with considering the both transportation and land uses together. The plans for the areas near stations of the Incheon 1st Rapid Transit Line are analysed and then the features and rational strategies are derived. The impact is analysed as applying the development strategies derived from the step into the areas near the stations of Incheon 1st Rapid Transit line.

KANO모형을 이용한 국가R&D보고서 시스템의 서비스 방안

박만희(Man-Hee Park) 한국콘텐츠학회 2014 한국콘텐츠학회논문지 Vol.14 No.1

정보시스템을 통해 제공되는 서비스와 사용자 만족간의 관계는 정보시스템의 신규 서비스 개발에 있어서 중요한 사항으로 고려되어 왔다. 본 연구에서는 IT기술변화에 따른 웹 환경변화를 고려하여 국가R&D보고서 서비스에 적용 가능한 12개 핵심 서비스를 도출하였다. 도출된 12개 신규 서비스는 국가R&D보고서 시맨틱검색 서비스, 연관보고서 서비스, RSS 서비스, mesh-up 서비스, topic-map service, open API 서비스, 개인화 서비스, 집단지성 서비스, SNS 서비스, 비정형데이터 서비스, 상세검색 서비스, 메일링 서비스등이다. 국가R&D 보고서 서비스에서 도출한 12개 신규 서비스의 품질속성을 파악하기 위하여 KANO모형을 이용하여 설문조사를 실시하였다. 설문조사 결과와 서비스별 만족계수 및 서비스 분류결과를 바탕으로 단계별 서비스전략을 제시하였다. 1단계로 추진해야 할 서비스로는 비정형데이터 서비스, 개인화서비스, 연관보고서 서비스, topic-map 서비스, open API 서비스, 집단지성 서비스 등이고, 2단계로 추진해야 할 서비스로는 RSS 서비스, mesh-up 서비스, 국가R&D보고서 시맨틱검색 서비스, 메일링 서비스, 상세검색 서비스, SNS 서비스 등이다. The relationship between a service provided via the information system and user satisfaction has been thought of as an important factor for the development of a new service for the information system. In this study, the twelve new key services that are applicable to national R&D report system were derived by web environment changes in step with IT technology developments in order to support the new service for the user. The twelve new key services are as follows; semantic search service for national R&D report, associated report service, RSS service, mesh-up service, topic-map service, open API service, personalized service, collective intelligence service, SNS service, unstructured data service, detailed search service, mailing service. To assess the quality attribute of the twelve new key services in the national R&D report system, a survey was performed. In conclusion, a stepwise service plan for the national R&D report system was proposed which would use the satisfaction coefficient and the results of the service classification. The following step-by-step service should be developed by in this way. The unstructured data service, personalized service, associated report service, topic-map service, open API service, and the collective intelligence service are needed to develop the first step and RSS service, mesh-up service, semantic search service for the national R&D report, mailing service, detailed search service, and SNS service are needed to develop the second step.

부트스트랩 DEA를 이용한 공기업 효율성 분석

박만희(Man Hee Park) 한국콘텐츠학회 2015 한국콘텐츠학회논문지 Vol.15 No.5

본 연구에서는 부트스트랩 DEA를 이용하여 2013년 14개 공기업의 경영 효율성을 분석하였다. 또한 단절회귀분석을 이용하여 부트스트랩 편의조정 효율성에 영향을 미치는 요인을 분석하였다. 본 연구를 통해 도출된 결과와 시사점을 정리하면 다음과 같다. 첫째, 부트스트랩 DEA모형을 적용한 효율성 분석결과에 따르면 평균 기술효율성이 0.3182, 평균 순수기술효율성이 0.4994, 평균 규모효율성이 0.6585로 나타났으며, 기술비효율성의 주된 원인이 순수기술비효율성에 기인하는 것으로 분석되었다. 둘째, CRS 가정과 VRS 가정하의 일반 DEA모형을 적용한 TE와 부트스트랩 DEA모형을 적용한 TE 순위간에는 유의한 차이가 없는 것으로 나타났다. 셋째, 비효율원인 분석에서는 평가대상 14개 기관 중 11개 기관의 비효율원인이 순수기술에 더 크게 기인하고 있고, 3개 기관이 규모효율에 의해 비효율이 나타나는 것으로 분석되었다. 넷째, 단절회귀분석에서는 규모효율성에 영향을 미치는 요인으로 유의수준 10%에서 인건비, 영업이익, 매출액, 자기자본수익률, 종원원수 순으로 나타났다. This study measures the managerial efficiency of Koreas 14 public enterprises using bootstrap DEA in 2013. In addition, it examines the factors that affect on the bootstrap bias-corrected efficiency using truncated regression analysis. The results and implications of this study are as follows. First, using bootstrap DEA model analysis, the results showed that the mean technical efficiency was 0.3182, the mean pure technical efficiency was 0.4994 and the mean scale efficiency was 0.6585. The main cause of technical inefficiency was due to pure technical inefficiency. Second, rank test between technical efficiency of general DEA model and bootstrap DEA model was no significant difference under CRS and VRS assumption. Third, the main cause of the inefficiency in 11 DMUs among 14 DMUs were mainly due to the pure technology and three DMUs were because of the scale efficiency. Finally, in the truncated regression analysis, cost of labor, profit, sales, return of equity, and the number of employees appeared as factors affecting the scale efficiency at the 10% significance level.

동시단어분석을 이용한 품질경영분야 지식구조 분석

박만희 ( Man-Hee Park ) 한국품질경영학회 2016 품질경영학회지 Vol.44 No.2

Purpose: This study was designed to analyze the behavioral change of knowledge structures and the trends of research topics in the quality management field. Methods: The network structure and knowledge structure of the words were visualized in map form using co-word analysis, cluster analysis and strategic diagram. Results: Summarizing the research results obtained in this study are as follows. First, the word network derived from co-occurrence matrix had 106 nodes and 5,314 links and its density was analyzed to 0.95. Average betweenness centrality of word network was 2.37. In addition, average closeness centrality and average eigenvector centrality of word network were 0.01. Second, by applying optimal criteria of cluster decision and K-means algorithm to word co-occurrence matrix, 106 words were grouped into seven clusters such as standard & efficiency, product design, reliability, control chart, quality model, 6 sigma, and service quality. Conclusion: According to the results of strategic diagram analysis over time, the traditional research topics of quality management field related to reliability, 6 sigma, control chart topics in the third quadrant were revealed to be declined for their study importance. Research topics related to product design and customer satisfaction were found to be an important research topic over analysis periods. Research topic related to management innovation was emerging state and the scope of research topics related to process model was extended to research topics with system performance. Research topic related to service quality located in the first quadrant was analyzed as the key research topic.

DEA 교차 효율성 모형에서 벤치마킹정보 제공방법

박만희(Park, Man Hee) 글로벌경영학회 2021 글로벌경영학회지 Vol.18 No.1

DEA(Data Envelopment Analysis)는 생산함수에 대한 가정없이 조직의 상대적인 효율성을 평가 하는 비모수적 기법으로 다양한 분야에서 활용되어 오고 있다. CCR과 BCC 모형은 효율성이 1인 DMU(Decision Making Units)가 다 수개로 분석되어 변별력이 낮다는 문제점을 가지고 있다. 이러한 변별력 문제를 해결하기 위해 DMU들간의 효율성 순위를 제공할 수 있는 교차 효율성 모형이 활용되고 있다. 하지만 교차 효율성 모형은 비효율적인 DMU가 효율적인 DMU로 되기 위한 벤치마킹 정보를 제공할 수 없다는 단점을 가지고 있다. 따라서 본 연구에서는 교차 효율성 모형 에서 벤치마킹 정보를 제공하는 방법을 제시하였다. 본 연구의 결과를 요약하면 다음과 같다. 첫째, Shannon의 엔트로피 개념에 기반한 중요도 지수를 이용하여 변별력이 가장 높은 교차효 율성 모형을 제시하였다. 분석결과에 따르면 Aggressive, Arbitrary, Benevolent 모형 중 Aggressive 모형의 변별력이 가장 높은 것으로 나타났다. 둘째, 비효율적인 DMU가 벤치마킹해야할 참조 DMU를 선정하기 위해 군집분석을 적용하였으며 실루엣 지수를 이용하여 최적 군집수 결정방법을 제시하였다. 셋째, 군집분석 결과를 히트맵과 덴드로그램으로 가시화하여 비효율적인 DMU가 벤치마킹해야 할 DMU를 쉽게 확인할 수 있도록 하였다. 넷째, 벤치마킹의 수준을 제공 하기 위해서 주성분분석(Principal component analysis)을 이용하여 핵심 주성분을 도출하고 이를 바탕으로 투입요소와 산출요소별 벤치마킹 비율을 제공하였다. 본 연구에서는 군집분석과 주성분분석을 바탕으로 벤치마킹 참조집합과 변수별 벤치마킹 비율을 제공하였다. 또한 변별력 평가지표를 이용한 최적 모형 선정방법과 실루엣 지수를 이용한 최적 군집수 결정방법을 제시하였다. 본 연구는 교차 효율성 분석결과를 바탕으로 벤치마킹정보를 제공하는 방법을 제시하였다는 점에서 연구의의가 있다. DEA (Data Envelopment Analysis) has been used in various fields as a nonparametric technique to evaluate the relative efficiency of an organization without assumptions about production functions. The CCR and BCC models have a problem that the discrimination power is low because many DMUs (Decision Making Units) with an efficiency of 1 are analyzed. To solve this problem of discrimination, cross efficiency model that can provide an efficiency ranking among DMUs is used. However, the cross-efficiency model has a drawback that it cannot provide benchmarking information for an inefficient DMU to become an efficient DMU. Therefore, this work presents a method for providing benchmarking information in cross efficiency models. The summary of the results of this study is as follows. First, we present a cross efficiency model with the highest discrimination power using the importance index based on Shannon s entropy concept. According to the analysis results, it was found that the Aggressive model had the highest discrimination power among Aggressive, Arbitrary, and Benevolent models. Second, cluster analysis was applied to select the reference DMU to be benchmarked by the inefficient DMU, and a method for determining the optimal number of clusters was suggested using the silhouette index. Third, the cluster analysis results were visualized as heat maps and dendrograms so that inefficient DMUs could easily identify DMUs to be benchmarked. Fourth, in order to provide the level of benchmarking, the key principal components were derived using principal component analysis, and based on which the benchmarking ratio for each input and output variable was provided. In this study, based on cluster analysis and principal component analysis, a benchmarking reference set and a benchmarking ratio for each variable were provided. In addition, a method for selecting an optimal model using discriminative power evaluation index and a method for determining the optimal number of clusters using silhouette index are presented. This study is meaningful in that it presents a method for providing benchmarking information based on the results of cross efficiency analysis.

유창성 일반화 프로그램을 위한 웹기반 유창성 평가시스템 개발

박만희(Man Hee Park) 한국언어치료학회 2012 言語治療硏究 Vol.21 No.3

Disfluency in speech has already been analyzed from different points of views, either linguistic, cognitive, or engineering. But a web-based system to test and evaluate fluency for people who stutter does not exist. This study aims to develop a web-based system which tests and evaluates disfluency. The web-based supporting system developed in this study was FTES(Fluency Test and Evaluation System). The FTES supports both TTS(Text-To-Speech) and conversion service of voice to mp3 file. Also, the evaluation service supports pathological disfluency and normally disfluency. It provides 10 key services such as management of fluency index, test of fluency, evaluation of fluency, management of results, and common service.

창업보육센터(BI) 입주심사지표특성과 성과의 관계에 관한 실증연구

박만희(Park, Man-Hee),양동우(Yang, Dong-Woo) 한국산학기술학회 2011 한국산학기술학회논문지 Vol.12 No.1

최근 들어 고용 없는 성장 및 실업률이 높아지면서 기술을 기반으로 한 창업의 산실인 창업보육센터 (Business Incubator : BI)가 주목을 받고 있다. 따라서 BI의 효율적인 운영과 성과측면에도 많은 연구들이 이루어져 왔다. 국내외 선행연구들은 주로 BI의 성공요소들(Critical Success Factors)이 성과에 미치는 영향, 또는 BI의 내부적인 운영 프로그램이나 지원서비스에 대하여 연구를 진행하여 왔다. 최근 BI 입주 시 지니고 있는 입주기업들의 잠재적인 역량 이 성과에 영향을 미친다는 주장이 제기되고 있다. 따라서 본 연구는 이러한 문제들을 연구하기 위하여 첫째, BI별 입주업체 심사지표특성들이 성과에 미치는 영향을 분석하고, 둘째, 입주업체 심사지표특성이 BI의 업무역량 및 매니저의 역량등과 연계되어 성과에 미치는 조절효과를 분석하고자 하였다. 분석결과 CEO 역량 중 전문성은 사업화 성공률에 정(+)의 영향을 미치는 것으로 나타났다. 제품경쟁력과 시장성의 경우 사업화 성공률에 대하여 업무역량(운영강도)이 적용되었을 경우 정(+)의 조절효과를 나타내고 있다. 특히, 입주 업체 CEO의 자금능력은 중요한 요소로서 사업화 성공률에 부(-)의 영향을 미치고 있으나 매니저의 역량을 통하여 정 (+)의 조절효과를 시사하고 있다. With recent increase in growth without employment and unemployment rate, Business Incubator (BI), which is the birthplace of business start-up, is drawing much attention. Therefore, numerous studies had been carried out from the perspectives of efficient operation and performances of BI. Preceding studies at home and abroad were concentrated mainly on the effect of Critical Success Factors of BI on performance, or on internal operational programs or support services of BI. Recently, assertion that potential capacity of companies located in BI at the time of their commencement of occupancy imparts effect on the performance has been presented. Therefore, this Study, in order to pursue research on above issues, will, firstly, analyze the effect of the characteristics of evaluation of companies wishing to be located in BI conducted by each BI, and, secondly, regulation effect of characteristics of evaluation of companies wishing to be located in BI imparted on performance in connection with the work capabilities of BI and capabilities of manager. The results of analysis illustrated that the expertise, among the capabilities of CEO, imparts affirmative effect on the success rate of business start-up. Product competitiveness and marketability displayed affirmative effect on the success rate of business start-up when work capability (operational intensity) is applied. In particular, although the financing capability of CEO of the company located in BI, as an important factor, imparts negative effect on the success rate of business start-up, it implies affirmative regulation effect through the capabilities of manager.

웹기반 효율성 분석시스템 개발

박만희(Park, Man Hee) 글로벌경영학회 2021 글로벌경영학회지 Vol.18 No.2

DEA(Data Envelopment Analysis, 자료포락분석)는 생산함수에 대한 가정 없이 다양한 조직의 효율성을 분석할 수 있는 비모수적 분석기법이다. DEA가 가진 장점으로 인해 지난 40년 동안 효율성 분석 기법으로 꾸준히 활용되고 있으며, 다양한 DEA 분석 소프트웨어가 개발되어 이용되고 있다. 무료 DEA 소프트웨어의 경우 분석모형이 부족하고 R 패키지의 경우 프로그램밍 기법을 학습해야 하는 단점이 존재한다. 따라서 다양한 DEA 분석모형과 효율성 및 생산성 변화 추이분석을 지원하면서 별도의 설치와 환경설정이 필요 없는 웹기반 효율성 분석시스템을 연구자들에게 제공하면 많은 도움이 될 것으로 판단된다. 본 연구에서는 다수 개의 투입 요소를 이용하여 다수 개의 산출물을 생산하는 조직의 효율성 분석을 지원할 수 있는 웹기반 효율성 분석시스템인 WebDEA를 개발하였다. 본 연구를 통해 개발된 WebDEA 시스템의 주요 특징과 기능을 요약하면 다음과 같다. 첫째, 효율성 점수에 있어서 유일한 순위를 제공할 수 있는 Super Efficiency 모형, Cross Efficiency 모형, Bootstrap DEA 모형을 지원하고, 음수 값을 가지는 데이터의 효율성 분석을 위해 SORM(Semi-Oriented Radial Measure) 모형을 지원한다. 둘째, 시간의 변화에 따른 효율성과 생산성 분석 기능을 제공하고 변화추세를 파악하기 위해서 DEA Window 분석과 Malmquist 생산성분석 기능을 제공한다. 셋째, 데이터 입력과 분석결과 관리 편의를 위해 엑셀 인터페이스 기능을 제공하고 분석결과에 대해서 line, bar, scatter, radar chart 기능과 그래프 저장 기능을 제공한다. 넷째, 사용자 인터페이스와 사용자 경험 향상을 위해 도움말 기능과 반응형 메시지 처리기능을 제공한다. 마지막으로 웹기반 애플리케이션을 제공함으로써 별도의 설치나 환경설정 없이 시스템 이용이 가능하다. DEA 분야에 관심이 있는 연구자들이 본 연구를 통해 개발된 WebDEA를 활용하여 효율성 및 생산성 분석 관련 연구가 활성화되고 양질의 연구성과가 창출되기를 기대한다. DEA (Data Envelopment Analysis) is a non-parametric analysis method that can analyze the efficiency of various organizations without assumptions about the production function. Due to the advantages of DEA, it has been continuously used as an efficiency analysis technique for the past 40 years, and various DEA analysis software has been developed and used. In the case of free DEA software, the analysis model is insufficient, and in the case of the R package, there are disadvantages of learning programming techniques. Therefore, it would be very helpful to provide researchers with a web-based efficiency analysis system that does not require separate installation and configuration while supporting various DEA analysis models and analysis of changes in efficiency and productivity. In this work, we develop WebDEA, a web-based efficiency analysis system that can support the efficiency analysis of organizations that produce multiple outputs using multiple input elements. The main features and functions of the WebDEA system developed through this study are summarized as follows. First, it supports the Super Efficiency model, the Cross Efficiency model, and the Bootstrap DEA model that can provide a unique ranking in the efficiency score, and the SORM (Semi-Oriented Radial Measure) model for the efficiency analysis of data with negative values. Second, DEA Window analysis and Malmquist productivity analysis functions are provided to provide efficiency and productivity analysis functions over time changes and to identify changes. Third, it provides an Excel interface function for data input and analysis result management convenience, and provides line, bar, scatter, radar chart functions and graph storage functions for analysis results. Fourth, it provides a help function and a responsive message processing function to improve the user interface and user experience. Finally, by providing web-based applications, the system can be used without installation or configuration. It is hoped that researchers interested in the field of DEA will use WebDEA developed through this study to facilitate research related to efficiency and productivity analysis and create high-quality research results.