챗봇 환경에서 데이터 시각화 인터랙션을 위한 자연어처리 모델

오상헌,허수진,김성희,Oh, Sang Heon,Hur, Su Jin,Kim, Sung-Hee 한국정보처리학회 2020 정보처리학회논문지. 컴퓨터 및 통신시스템 Vol.9 No.11

스마트폰의 보급으로 인해 개인화된 데이터를 활용하고자 하는 서비스들이 증가하고 있다. 특히, 헬스케어와 관련된 서비스들은 다양한 데이터를 다루며, 이를 효과적으로 보여주기 위해 데이터 시각화 기법을 활용하고 있다. 데이터 시각화 기법이 활용되면서 자연스럽게 시각화에서의 인터랙션 또한 함께 강조되고 있다. PC 환경에서 데이터 시각화에 대한 인터랙션은 마우스로 이루어지기 때문에, 데이터에 대한 필터링이 다양하게 제공되고 있다. 반면, 모바일 환경에서의 인터랙션은 화면의 크기가 작고, 인터랙션 가능 여부를 인지하기 어려워 버튼 터치 방식으로 앱에서 제공하는 제한된 시각화만을 제공받을 수 있다. 이러한 모바일 환경에서의 인터랙션 한계를 극복하기 위해, 챗봇과의 대화를 통해 데이터 시각화 인터랙션을 가능하게 하여 사용자들에게 개개인의 데이터를 다양한 시각화를 통해 확인할 수 있도록 하고자 한다. 이를 위해서는 사용자의 질의를 쿼리로 변환하여, 주기적으로 데이터를 축적하고 있는 데이터베이스에서 변환된 쿼리를 통해 결과 데이터를 불러올 수 있어야 한다. 자연어를 쿼리로 변환하는 연구는 현재 많이 이루어지고 있지만, 시각화를 기반으로 하여 사용자의 질의를 쿼리로 변환하는 연구에 대해서는 아직 이루어지지 않았다. 따라서, 본 논문에서는 사전에 데이터 시각화 기법이 정해진 상황에서의 쿼리 생성에 초점을 맞추고자 한다. 지원하는 인터랙션은 태스크 x-축 값에 대한 필터링 및 두 그룹 간 비교이다. 테스트 시나리오는 걸음 수에 대한 데이터를 활용하였으며, x-축 기간에 대한 필터링은 바 그래프, 두 그룹간 비교는 라인 그래프로 나타내었다. 시각화를 통해 요청한 정보를 제공받을 수 있는 자연어처리 모델을 개발하기 위해 1,000명을 대상으로 한 설문조사를 통해 약 15,800개의 학습 데이터를 수집하였다. 알고리즘 개발 및 성능 평가를 진행한 결과, 분류 모델에서는 약 89%, 쿼리 생성 모델에서는 약 99% 정확도를 보였다. With the spread of smartphones, services that want to use personalized data are increasing. In particular, healthcare-related services deal with a variety of data, and data visualization techniques are used to effectively show this. As data visualization techniques are used, interactions in visualization are also naturally emphasized. In the PC environment, since the interaction for data visualization is performed with a mouse, various filtering for data is provided. On the other hand, in the case of interaction in a mobile environment, the screen size is small and it is difficult to recognize whether or not the interaction is possible, so that only limited visualization provided by the app can be provided through a button touch method. In order to overcome the limitation of interaction in such a mobile environment, we intend to enable data visualization interactions through conversations with chatbots so that users can check individual data through various visualizations. To do this, it is necessary to convert the user's query into a query and retrieve the result data through the converted query in the database that is storing data periodically. There are many studies currently being done to convert natural language into queries, but research on converting user queries into queries based on visualization has not been done yet. Therefore, in this paper, we will focus on query generation in a situation where a data visualization technique has been determined in advance. Supported interactions are filtering on task x-axis values and comparison between two groups. The test scenario utilized data on the number of steps, and filtering for the x-axis period was shown as a bar graph, and a comparison between the two groups was shown as a line graph. In order to develop a natural language processing model that can receive requested information through visualization, about 15,800 training data were collected through a survey of 1,000 people. As a result of algorithm development and performance evaluation, about 89% accuracy in classification model and 99% accuracy in query generation model was obtained.

ARM 플랫폼 기반의 음성 감성인식 시스템 구현

오상헌(Sang-Heon Oh),박규식(Kyu-Sik Park) 한국멀티미디어학회 2007 멀티미디어학회논문지 Vol.10 No.11

본 논문은 마이크로폰을 통해 실시간으로 습득된 음성으로부터 사람의 음성 감성상태를 평상, 기쁨, 슬픔, 화남 등 4가지로 구별할 수 있는 ARM 플랫폼 기반의 음성 감성인식 시스템 구현에 관한 것이다. 일반적으로 마이크로폰으로 수신된 음성은 화자 주변의 환경 잡음과 마이크로폰의 시스템 특성 때문에 입력 음성 신호가 왜곡되고 이로 인해 시스템의 성능이 저하된다. 본 논문에서는 이러한 잡음 영향을 최소화하기 위해 비교적 단순한 구조와 적은 연산 량을 가진 이동평균(MA, Moving Average) 필터를 입력 음성의 특징벡터 열에 적용하였다. 또한, 효율적으로 감성 특징벡터를 최적화할 수 있는 SFS(Sequential Forward Selection)기법을 적용해 제안 시스템의 성능을 최적화하였으며 감성 패턴 분류기로는 SVM(Support Vector Machine)을 사용하였다. 실험 결과 제안 감성인식 시스템은 모의실험에서 약 65%, ARM 플랫폼에서 약 62%의 인식률을 보였다. In this paper, we implemented a speech emotion recognition system that can distinguish human emotional states from recorded speech captured by a single microphone and classify them into four categories: neutrality, happiness, sadness and anger. In general, a speech recorded with a microphone contains background noises due to the speaker environment and the microphone characteristic, which can result in serious system performance degradation. In order to minimize the effect of these noises and to improve the system performance, a MA(Moving Average) filter with a relatively simple structure and low computational complexity was adopted. Then a SFS(Sequential Forward Selection) feature optimization method was implemented to further improve and stabilize the system performance. For speech emotion classification, a SVM pattern classifier is used. The experimental results indicate the emotional classification performance around 65% in the computer simulation and 62% on the ARM platform.

기능성 쌀의 소비자 가치평가와 판매전략

오상헌 ( Sang Heon Oh ),이순석 ( Soon Seok Lee ),박평식 ( Pyung Sik Park ),한원식 ( Won Sik Han ) 한국식품유통학회 2003 食品流通硏究 Vol.20 No.1

농식품 전자상거래 이용 소비자를 위한 SNS 마케팅 전략 연구

오상헌(Oh, Sang-Heon),황대용(Hwang, Dae-Yong),김영철(Kim, Young-Chul) 한국전자상거래학회 2013 전자상거래학회지 Vol.13 No.3

본 연구는 전자상거래를 중심으로 한 농식품 유통 및 SNS를 이용하는 소비자의 특성 조사하여 경영전략 개발을 위한 가이드라인 제시하고, SNS의 서비스 속성을 조사하여 농식품의 전자상거래에 맞는 최적의 SNS 특성을 제시함으로써 농식품 특성에 맞는 마케팅 수단으로서 SNS 활용 방법을 모색하고자 하였으며, 이를 위해 SNS 특성 분석을 위해 기존의 문헌 및 조사자료, 현재 운영되고 있는 해당 서비스에 대한 세부 조사 분석을 통해 SNS의 유형별 특성을 분석하여 제시하였다. This study, guidelines for the development of management strategies presented by researching the characteristics of the consumers of agri-food distribution and e-commerce SNS. SNS how to take advantage of fit to the characteristics of agri-food and agri-food e-commerce presents the optimal characteristics of the SNS service investigate the properties of the SNS, as a means of marketing was to explore. For this purpose, analysis of the type characteristics of the SNS, characterization for analysis through a detailed research of the existing literature and surveys, for those services that are currently operating is presented.

무인 비행체용 저가의 ADGPS/INS 통합 항법 시스템

오상헌(Sang Heon Oh),황동환(Dong-Hwan Hwang),이상정(Sang Jeong Lee),박찬식(Chansik Park) 제어로봇시스템학회 2005 제어·로봇·시스템학회 논문지 Vol.11 No.7

LMCP 기반의 확장 가능한 다수 무인기 임무 자율화 시험 환경 설계

오상헌(Sang Heon Oh),이경섭(GyeongSeop Lee),박재성(Jae Seong Park) 한국항공우주학회 2023 한국항공우주학회 학술발표회 논문집 Vol.2023 No.4

배추 뿌리혹병의 마커 탐색을 위한 네트워크 기반의 전사체 분석

오상헌(Sang Heon Oh),김만선(Man-Sun kim),최수련(Su Ryun choi),임용표(Yong Pyo lim) 한국원예학회 2018 한국원예학회 학술발표요지 Vol.2018 No.10

고정밀 INS를 이용한 GAK(GPS Adapter Kit) 항법 모듈의 차량 시험

오상헌(Sang Heon Oh),손석보(Seok Bo Son),권승복(Seung Bok Kwon),신동호(Don Ho Shin),황동환(Dong-Hwan Hwang),이상정(Sang Jeong Lee),박찬식(Chansik Park) 한국항공우주학회 2007 韓國航空宇宙學會誌 Vol.35 No.3

GAK(GPS adapter kit)은 GPS/INS 항법 모듈을 내장한 사거리 연장 키트의 일종으로 자유 낙하식 폭탄에 장착하여 투하 정확도의 향상을 목적으로 한다. 본 논문에서는 GAK 항법 모듈의 차량 시험 결과를 제시하였다. 항법 모듈은 상용의 MEMS IMU, 내장형 GPS 수신기 및 항법 컴퓨터로 구성된다. GPS 수신기는 위성 가시성 향상 및 자세 측정을 위하여 다중 안테나를 사용하는 구조로 설계하였다. 실시간 항법 소프트웨어는 모듈화 구조로 설계하여 유지보수성 및 확장성을 고려하였다. 항법 모듈의 성능을 평가하기 위해 고성능 INS인 Honeywell H-726 MAPS를 탑재한 차량 시험을 수행하였다. 차량 시험 결과 GPS 자세 결과를 사용한 GAK 통합 합법 모듈이 일반적인 GPS/INS 통합의 경우에 비하여 더 나은 항법 성능을 나타내었으며 재밍 환경을 고려한 경우에도 순수 항법에 비하여 우수한 coasting 성능을 제공하였다. A GPS adapter kit (GAK) is a GPS/INS guided range extension system to improve the accuracy and availability of existing dumb bombs. In this paper, a van test result of GPS/INS navigation module (NM) for guided bomb with GAK has been presented. The NM consists of a commercial MEMS IMU, embedded GPS receiver and navigation computer unit (NCU). The GPS receiver of NM was designed to use multiple antennas for satellite visibility and GPS attitude determination. The real-time navigation software was designed by modularized structure to guarantee the maintainability and extensibility. In order to evaluate the performance of the NM, a van test was preformed by using a high performance INS - Honeywell H-726 MAPS(Modular Azimuth Position System). The van test results show that the GAK NM with GPS attitude measurement gives better navigation performance than a conventional GPS/INS integration and good coasting capabilities under jamming environment.

챗봇 기반의 지능형 시각화 프레임워크

오상헌(Sang-Heon Oh),김성희(Sung-Hee Kim) 한국정보통신학회 2019 한국정보통신학회 종합학술대회 논문집 Vol.23 No.2

현재까지의 데이터분석은 관계형 데이터베이스 내에 수집된 데이터를 기반으로 SQL을 통해 주로 전문가들에 의해 이루어졌다. 빅데이터 시대에 접어들면서 데이터의 폭발적인 증가로 인해 이제는 전문가들뿐만 아니라 일반인들에게도 데이터분석은 필요한 영역이 되고 있다. 기업이나 기관에서는 보다 효과적인 데이터 분석을 위해 시각화를 활용하고 있으며, 데스크탑을 시작으로 모바일, 대형 디스플레이 등 다양한 환경으로 변화하고 있다. 하지만 시각화에 대한 인터랙션은 데스크탑 기반으로 발전해 왔으며, 모바일과 대형 디스플레이 환경에서의 최적화된 방법에 대한 연구가 필요하다. 따라서 본 논문에서는 접근성이 높고 쉽게 사용가능한 챗봇 기반의 지능형 시각화 프레임워크를 제안한다. 사용자는 챗봇을 통해 데이터 분석에 대한 요구사항을 텍스트로 입력하고, 이는 기계학습을 통해 쿼리로 변환되어 출력된 결과 데이터를 시각화하는 지능형 시각화 프레임워크를 제안한다. Data analysis so far has been done primarily by experts through SQL based on data collected within relational databases. However, with the explosive growth of data, data analysis is not only important to domain experts, but also necessary, to the general public. Companies and institutions are using visualizations for effective data analysis. And data analysis is being conducted in various types of environments, from traditional desktop to mobile or to large displays. However, interaction with visualizations has evolved on a desktop-based basis and needs to be studied on how to optimize in mobile and large display environments. Therefore, this paper proposes an intelligent visualization framework based on chatbot that is highly accessible and readily available. Users can enter text through chatbot, which creates and executes queries through machine learning, then proposes an intelligent visualization framework that visualizes output result data.

스마트 시티에서의 개인화 서비스와 개인정보 보호에 대한 사용자 인식에 관한 연구

오상헌(Sang-Heon Oh),김기환(Ki Hwan Kim),윤주상(Joosang Youn),김성희(Sung-Hee Kim) 한국HCI학회 2019 한국HCI학회 학술대회 Vol.2019 No.2

전세계적으로 스마트 시티를 구축하기 위한 움직임은 활발하게 일어나고 있으며, 스마트 시티의 핵심은 사물인터넷과 다양한 기술들을 활용해 데이터를 수집하고, 이를 통해 개인에게 맞는 편리한 서비스를 제공하는 것이다. 하지만, 개인 맞춤 서비스를 받기 위해서는 그만큼 개인에 대한 정보를 공유해야 한다. 이는 생활의 편리함과 새로운 서비스 등 가져다 줄 이점과 더불어 사생활 침해에 대한 우려도 동시에 지니고 있다는 의미로 볼 수 있다. 본 연구에서는, 스마트 시티 서비스 중 스마트 홈, 스마트 교통, 스마트 헬스케어에서 제공될 수 있는 지능형 서비스에 대한 사용자 인식을 개인화 서비스 및 개인정보 보호 선호도 측면에 대해서 조사하였다. 사생활 침해에 대한 우려가 있지만, 이를 감수하더라도 개인화 서비스를 선택하겠다는 경향성은 스마트 헬스케어 서비스, 스마트 교통서비스가 스마트 홈 서비스보다 높은 것으로 나타났다. 또한, 세 가지 서비스를 사용한다면, 어떤 개인정보가 유출될 수 있는가에 대해서 조사를 하였으며, 서비스를 사용하는 시점부터 언제나 개인정보 유출에 대한 위험을 인지하는 것을 확인할 수 있었다. 이러한 결과는 스마트 시티 구축시 실질적으로 서비스 활용도를 높일 수 있도록, 사용자에 대한 이해를 위해 활용될 수 있다는 점에서 그 의의가 있다.