데이터센터 모니터링 시스템에서 대량 스트리밍 센서 데이터 처리

선동한,김성중,최경륜,황수찬 한국차세대컴퓨팅학회 2017 한국차세대컴퓨팅학회 논문지 Vol.13 No.6

데이터센터는 다양한 센서로부터 수많은 종류의 데이터를 수집하고 있으며 이러한 데이터는 데이터센터 모니터링시스템의 분석을 통해 센터의 효율 관리와 개선에 활용되고 있다. 최근에는 데이터센터의 대형화 추세에 따라 센서데이터 양이 폭발적으로 증가하고 모니터링 시스템은 대량의 실시간 스트리밍 데이터에 대한 분석 및 처리 방안이필요하게 되었다. 따라서 본 논문에서는 데이터 발생시간인 이벤트 시간을 기반으로 한 대량의 스트리밍 센서데이터 처리 방안과 데이터양의 증가에 따른 처리 확장성(scalability) 제공 방안을 제시하고자 한다. 이벤트 시간 기반스트리밍 처리를 위해서는 데이터 발생시간과 처리시간 사이의 시간 지연 문제가 해결되어야 하는데 이를 위해 필터링(filtering), 추가시간(slack time), 윈도우 더블링(window doubling), 조정시간(coordinate time) 등을 이용한 처리 방안을 제시한다. 또한 처리 확장성 제공 방안으로 분산 스트리밍 시스템을 활용한 모니터링 시스템 구축 방안을 제시하고 실험적 시스템 구현을 통해 그 효율과 성능을 분석한다. A data center collects a very large volume of data from various kinds of sensors that is used by the data center monitoring system for the center’s efficiency management and improvement. As the recent trend of large size data center leads to the explosion of sensor data, the monitoring system requires streaming data processing to process and to analyze large volume of real-time data. This paper proposes an event time based real-time streaming processing model for large sensor data. The event time is the time when the data is generated at a sensor. This paper also presents a method to provide scalability of streaming data processing. For the event time based real-time streaming processing, a latency problem between data generation time and processing time should be resolved. We provide a solution based on filtering, slack time, window doubling and coordinate time methods. In order to provide the scalability, this paper builds an experimental monitoring system based on distributed streaming systems and shows an analysis of its performance and efficiency.

ISVS: 대화형 스트리밍 데이터 시각화 시스템

선동한,최경륜,황수찬,백중환 한국차세대컴퓨팅학회 2018 한국차세대컴퓨팅학회 논문지 Vol.14 No.2

Recently, there have been many studies on real-time processing and the visualization of a large stream data. However, in the existing studies, the changes which occurred in the input stream structure, in the data to be visualized, and in the processing methods, can not be reflected in visualization in real time. In this paper, we propose an Interactive Streaming Data Visualization System, ISVS, which provides visualization capabilities of streaming data covering collection and processing capabilities of visualized data. ISVS makes it easy for users to interactively express various visualization-relevant requirements of modulating input stream structures, filtering streams to be visualized, creating and modifying visualization functions. ISVS reflects them in real time. In addition, this paper presents the implementation of ISVS using the distributed streaming system. We show that it is capable of providing various real-time visualization processing by applying it to a stereo sound technology based video streaming service. 최근, 대량의 스트림 데이터에 대한 실시간 처리와 그 결과의 시각화에 관한 연구가 활발히 진행되고 있다. 그러나기존 연구는 입력 스트림 구조의 변경이나, 시각화할 데이터와 그 처리방식의 변경 등을 실시간으로 시각화에 반영하지 못하고 있다. 본 논문에서는 스트림 데이터의 시각화 기능과 시각화를 위한 데이터의 수집 및 처리 기능을 통합적으로 제공하는 대화형 스트림 시각화 시스템, ISVS(Interactive Streaming Data Visualization System) 를 제안한다. ISVS는 입력 스트림 구조 변경, 시각화할 스트림의 필터링, 시각화 함수의 생성, 수정 등 시각화에관련된 다양한 요구사항을 사용자가 쉽게 대화식으로 표현하고 이를 실시간으로 시각화에 반영할 수 있도록 한 시스템이다. 또한, 본 논문에서는 분산 스트리밍 시스템을 이용한 ISVS 시스템의 구현과 이 시스템을 입체음향 기술 기반의 동영상 스트리밍 서비스에 적용하여 실시간으로 다양한 시각화 처리가 가능함을 보였다.

내용 기반의 부분 검색을 위한 동영상 장기보존 시스템

선동한,유태경,이기준,황수찬 한국차세대컴퓨팅학회 2016 한국차세대컴퓨팅학회 논문지 Vol.12 No.1

최근 동영상이 주요 기록기관 및 포털 사이트 등에서 주요한 콘텐츠로 활용됨에 따라 동영상 기록물에 관한 연구 또한 활발하게 진행되고 있다. 기록물의 장기보존을 위해서는 보존하고자 하는 데이터정보를 Base64 인코딩을 통해텍스트 화하여 XML파일 안에 기술해야 한다. 하지만 동영상은 전자문서나 디지털이미지와는 다르게 개별단위의기록물 용량이 매우 크다. 또한 빅데이터 시대에 도달하여 저장되는 데이터량 또한 기하급수적으로 증가하고 있다. 이에 따라 기존의 단일 장기보존시스템으로 유입되는 데이터를 Base64인코딩하는데 있어 한계가 있다. 따라서 본논문에서는 동영상 기록물을 분산 환경에서 인코딩하고, 이를 재생 가능한 동영상으로 분할하여 장기보존 할 수 있는 시스템을 제시한다. 분할 된 데이터를 패키징하기 위해 디지털 객체에 대한 각종 메타데이터를 인코딩하는 표준인 METS를 기반으로, 분할된 파일을 관리할 수 있는 새로운 메타데이터 포맷을 제안한다. 또한 Base64인코딩의분산처리를 위해 하둡의 분산환경 저장소 HDFS와 실시간 분산형 컴퓨팅 프로젝트인 아파치 스파크를 이용한다. Videos are utilized mainly at recording institutions and major internet portal sites, and research on video archiving ongoing. For long-term data preservation, the information that a user wishes to preserve must be encoded and stored in an XML file using BASE64ENCODING. However, unlike conventional documents and digital images, video files are very large. In addition, as the era of big data approaches, the amount of data being stored is growing exponentially. Accordingly, an important limitation has emerged in that one cannot rely on a single long-term archival system because that system might not be able to encode a large amount of incoming data. Therefore, this paper will present a new long-term archival system that is able to divide the playable video and take advantage of encoding that utilizes the distribution environment. In order to create a distributed package, this study will propose a new metadata format that is able to manage distributed files based on the Metadata Encoding and Transmission Standard (METS). Moreover, in order to carry out the BASE64ENCODE distributed processing, the Hadoop distributed file system (HDFS) and Apache Spark will be used to store and distribute data in real time.

무질서 데이터를 위한 데이터 스트림 분리 처리 모델

선동한,장준혁,황수찬,이정구,고은비,정국식 한국차세대컴퓨팅학회 2023 한국차세대컴퓨팅학회 논문지 Vol.19 No.1

It is crucial to process the data stream in event-time ordering when real-time processing a great amount of data. Data stream however, through various causes may create disorientation of the input order. These out-of-order data may induce data latency and reduce the correctness of the result. We propose a one such approach, a DSSP(Data Stream Split Processing) model that can reduce the latency of the data processing while increasing the accuracy of out-of-order data process results. To prevent the delay of response time caused by late data, our DSSP model splits input data stream into normal data stream that arrives on time and late data stream that does not. This model provides the result of normal data stream first, then applies the late data result that has been separately cached to assure the correctness of the data processing. We analyze the efficiency and performance of our DSSP model through experimental implementation. 대량의 데이터를 실시간으로 처리하는 스트리밍 처리에서는 데이터가 발생한 순서에 따라 처리하는 것이 중요하다. 그러나 데이터 스트림은 다양한 원인으로 인해 입력 순서가 뒤바뀔 수 있으며, 이런 무질서 데이터는 데이터 처리 시간을 지연시키거나, 처리 정확도를 떨어트리는 문제를 초래한다. 본 논문에서는 무질서 데이터 처리결과의 정확성을 높이면서 이로 인해 발생하는 데이터 처리 지연을 줄일 수 있는 데이터 스트림 분리 처리 방법인 DSSP(Data Stream Split Processing) 모델을 제안한다. DSSP 모델은 지연 데이터로 인한 전체 처리시간의 지연을 방지하기 위해 입력 데이터 스트림을 처리시간 내에 입력되는 정상 데이터 스트림과 처리시간 내에 입력되지 못한 지연 데이터 스트림으로 분리하여 처리한다. 정상적으로 입력된 데이터는 처리결과를 우선 신속히 제공하고, 지연 입력된 데이터는 별도로 저장하였다가 그 처리결과를 추가로 반영하여 데이터의 정확성을 보장할 수 있도록 한다. 본 논문에서는 DSSP 시스템의 실험적 구현을 통해 그 효율과 성능을 분석한다.

이하선내 안면신경에서 발생한 신경초종 1례

선동일,김민식,이정학,조승호,Sun, Dong-Il,Kim, Min-Sik,Lee, Jeong-Hak,Cho, Seung-Ho 대한기관식도과학회 2000 大韓氣管食道科學會誌 Vol.6 No.1

A neurilemmoma of the facial nerve presenting as a parotid mass is a rare neoplasm and has been reported infrequently in the surgical literature. Diagnosis is usually by tissue biopsy intraoperatively and treatment is surgical with preservetion of facial function. This is a case of a solitary neurilemmoma involving the main trunk of the facial nerve in the posterior part of parotid gland continuing up to vertical segment of the facial nerve, in which the facial nerve had to be sacrificed and free autogenous nerve grafting was done.

비골 골-피부 유리 피판을 이용한 상악동 암종 재건 1례

선동일,김민식,권용재,조승호,Sun, Dong-Il,Kim, Min-Sik,Kwon, Yong-Jae,Cho, Seung-Ho 대한기관식도과학회 2000 大韓氣管食道科學會誌 Vol.6 No.1

A radical maxillectomy causes a defect of the alveolar bone, gingiva, palate, and orbital floor and causes cosmetical problems and masticatory and phonatory functions. Defect after a radical maxillectomy was reconstructed with skin or dermis graft was introduced, but recently wide resection of the tumor and functional reconstruction with free flap was introduced by several methods. The defect due to radical maxillectomy was reconstructed with scapula, iliac crest, radius. But reconstruction with a fibular osteocutaneous free flap was rarely introduced to defect of radical maxillectomy. The fibular osteocutaneous free flap was firstly introduced by Taylor. The fibular osteocutaneous free flap has several advantages. We experienced the first case of radical maxillectomy and reconstruction with the fibular osteocutaneous free flap, so we reported that case with literatures. The patient has a right maxillary sinus squamous carcinoma (T2N0M0), and performed a radical maxillectomy with right supraomohyoid neck dissection, and reconstruction with fibular osteocutaneous free flap. Donor site morbidity was little, and phonatory and masticatory function were nearly normalized. And cosmetical result was very acceptable.

전완유리피판을 이용한 전하순 결손의 재건 1례

선동일,김민식,김준형,조광재,조승호 대한기관식도과학회 2000 大韓氣管食道科學會誌 Vol.6 No.2

The goals of lip reconstruction are to provide oral competence, adequate support for the lower lip, contour restoration, adequate lip sulcus, and adequate oral aperture. The composite radial forearm palmaris longus free flap is thin enough that it can be folded onto itself without a significant increase in bulk. The flap is easy to dissect, the pedicle contains long vessels of large diameter, and the skin is a good color and texture match for the perioral region. Moreover, the vascularized tendon can be used for lower lip reconstruction. This makes the flap ideally suited for total lower lip reconstruction. We experienced the case of total lower lip excision and reconstruction with the radial forearm free flap including palmaris longus tendon, so we reported that case with literature. The patient has a lower lip squamous carcinoma(T3NIM0), and performed a total lower lip excision with right modified radical neck dissection and left extended supraomohyoid neck dissection, and a reconstruction with radial forearm free flap includng palmaris longus tendon. The oral competence and masticatory function were nearly normalized and cosmetical result was very acceptable.

인터넷 유해정보 차단을 위한 기술적 접근 방안

선동국,김성조 한국정보사회학회 2001 정보사회와 미디어 Vol.- No.3

내장형 시스템의 원활한 멀티미디어 서비스 지원을 위한 커널 수준의 RTP

선동국(Dong Guk Sun),김태웅(Tae Woong Kim),김성조(Sung Jo Kim) 한국정보과학회 2004 정보과학회 컴퓨팅의 실제 논문지 Vol.10 No.6

RTP는 VoD, AoD, VoIP와 같은 멀티미디어 서비스를 위해 실시간 데이타를 전송하기에 적합하도록 설계되어 있어, RTSP, H.323, SIP 등 실시간 데이타 전송 프로토콜로서 사용되고 있다. 내장형 시스템에서도 원활한 멀티미디어 서비스를 위해 내장형 시스템용 RTP 프로토콜 스택이 필요하지만 현재까지 이러한 RTP 프로토콜 스택은 전무한 상태이다. 본 논문은 내장형 시스템에 적합하도록 RTP 프로토콜 스택을 커널 수준에서 지원하는 embeddedRTP에 대하여 설명한다. EmbeddedRTP는 UDP 모듈에 포함되도록 설계되었기 때문에, TCP/IP 서비스를 필요로 하는 애플리케이션은 기존과 같이 동작하고, RTP 프로토콜 스택을 사용하는 애플리케이션은 embeddedRTP API를 이용하여 RTP 서비스를 받을 수 있다. EmbeddedRTP는 RTP 패킷이 도착했을 때, 패킷의 포트 번호와 세션 정보를 이용하여 세션별 패킷 버퍼에 저장한다. 애플리케이션과 embeddedRTP간의 통신은 시스템 콜과 시그널 메커니즘을 통해 이루어지며, embeddedRTP API를 제공함으로써 애플리케이션 개발이 용이하도록 했다. PDA 상에서 멀티미디어 스트리밍 서비스를 이용하여 embeddedRTP의 성능을 분석한 결과, 비교대상인 UCL RTP에 비해 코드사이즈는 약 58%정도 감소된 반면, 패킷 처리속도는 약 7.8배 빨라졌다. Since the RTP is suitable for real-time data transmission in multimedia services like VoD, AoD, and VoIP, it has been adopted as a real-time transport protocol by RTSP, H.323, and SIP. Even though the RTP protocol stack for embedded systems has been in great need for efficient support of multimedia services, such a stack has not been developed yet. In this paper, we explain embeddedRTP which supports the RTP protocol stack at the kernel level so that it is suitable for embedded systems. Since embeddedRTP is designed to reside in the UDP module, existing applications which rely on TCP/IP services can proceed the same as before, while applications which rely on the RTP protocol stack can request RTP services through embeddedRTP API. EmbeddedRTP stores transmitted RTP packets into per session packet buffer, using the packet's port number and multimedia session information. Communications between applications and embeddedRTP is performed through system calls and signal mechanisms. Additionally, embeddedRTP API makes it possible to develop applications more conveniently. Our performance test shows that packet-processing speed of embeddedRTP is about 7.8 times faster than that of UCL RTP for multimedia streaming services on PDA in spite that its object code size is reduced about by 58% with respect to UCL RTP's.

영아에게 발생한 원발성항인지질항체증후군 1례

선동신,박경배 순천향의학연구소 2009 Journal of Soonchunhyang Medical Science Vol.14 No.3S

..