다중 세분화 자원 예약 기반의 저전력 실시간 스케쥴링 기법

선주형,조현중,Sun, Joohyung,Cho, Hyeonjoong 한국정보처리학회 2013 정보처리학회논문지. 컴퓨터 및 통신시스템 Vol.2 No.8

본 논문에서는 멀티미디어 서비스를 위한 파워-효율적인 고정 우선순위의 실시간 스케쥴링 알고리즘으로 다중 세분화 자원 예약 기반의 정적 전압 조절 알고리즘 (STATIC-MULTIRSV)을 제안한다. 다중 세분화 자원 예약은 전통적인 데드라인 기반의 자원 예약 보다 높은 연산 자원 사용률과 더 나은 태스크간 독립성을 제공하는 모델로서 [2]에서 소개된바 있다. 다중 세분화 모델을 기반으로 제안된 STATIC-MULTIRSV 알고리즘은 비디오 스트림들의 I-프레임들을 각각의 데드라인을 모두 만족하는 것을 보장하면서 파워 소비를 줄이도록 고안되었다. 제안된 알고리즘은 실시간 리눅스[6] 상에서 구현을 통해 실험적으로 기존의 방법에 비해 파워 소모를 최대 15%까지 줄였음을 보였다. We proposes a power-aware fixed-priority real-time scheduling algorithm for multimedia service, called static voltage scaling algorithm with multi-granularity resource reservation (STATIC-MULTIRSV). The multi-granularity resource reservation was introduced to deliver higher system utilization and better temporal isolation than the traditional approaches in [2]. Based on this, our STATIC-MULTIRSV is designed to reduce the power consumptions while guaranteeing that all I-frames of each video stream meet their deadlines. We implemented the proposed algorithm on top of ChronOS Real-time Linux [6]. We experimentally compared STATIC-MULTIRSV with other existing methods which showed that STATIC-MULTIRSV reduce power consumption by maximum 15% compared to its experimental counterparts.

한정된 전력량을 가진 멀티프로세서 시스템에서 (m,k)-firm 데드라인 태스크를 위한 실시간 스케줄링 기법

공연화,조현중,Kong, Yeonhwa,Cho, Hyeonjoong 한국정보처리학회 2013 정보처리학회논문지. 컴퓨터 및 통신시스템 Vol.2 No.6

We propose Energy-constrained Multiprocessor Real-Time Scheduling algorithms for (m,k)-firm deadline constrained tasks (EMRTS-MK). Rather than simply saving as much energy as possible, we consider energy as hard constraint under which the system remains functional and delivers an acceptable performance at least during the prescribed mission time. We evaluate EMRTS-MKs in several experiments, which quantitatively show that they achieve the scheduling objectives. 본 연구에서는 전력량 제약을 가진 멀티프로세서 시스템에서 (m,k)-firm 데드라인을 갖는 실시간 태스크를 효율적으로 스케줄링 할 수 있는 방법으로 EMRTS-MK(Energy-constrained Multiprocessor Real-Time Scheduling algorithms for (m,k)-firm deadline constrained tasks) 를 제안한다. EMRTS-MK는 단지 전력 소모량을 최소로 줄이는 것이 목표가 아니라 한정된 전력량을 고려하여 시스템이 주어진 임무 시간(Mission Time) 동안 최소한의 서비스 품질을 보장하고 동시에 가능하면 최대한의 서비스 품질을 제공함을 목표로 한다. 본 연구에서는 상용멀티코어 환경에서 EMRTS-MK를 구현하여 성능을 평가하였으며, 제안된 알고리즘이 (m,k)-firm 데드라인을 갖는 멀티미디어 서비스를 효과적으로 지원해 줄 수 있다는 것을 보였다.

수어 번역을 위한 3차원 컨볼루션 비전 트랜스포머

성호렬 ( Horyeor Seong ),조현중 ( Hyeonjoong Cho ) 한국정보처리학회 2024 정보처리학회논문지. 소프트웨어 및 데이터 공학 Vol.13 No.3

In the Republic of Korea, people with hearing impairments are the second-largest demographic within the registered disability community, following those with physical disabilities. Despite this demographic significance, research on sign language translation technology is limited due to several reasons including the limited market size and the lack of adequately annotated datasets. Despite the difficulties, a few researchers continue to improve the performance of sign language translation technologies by employing the recent advance of deep learning, for example, the transformer architecture, as the transformer-based models have demonstrated noteworthy performance in tasks such as action recognition and video classification. This study focuses on enhancing the recognition performance of sign language translation by combining transformers with 3D-CNN. Through experimental evaluations using the PHOENIX-Wether-2014T dataset [1], we show that the proposed model exhibits comparable performance to existing models in terms of Floating Point Operations Per Second (FLOPs).

Lip and Voice Synchronization Using Visual Attention

윤동련 ( Dongryun Yoon ),조현중 ( Hyeonjoong Cho ) 한국정보처리학회 2024 정보처리학회논문지. 소프트웨어 및 데이터 공학 Vol.13 No.4

This study explores lip-sync detection, focusing on the synchronization between lip movements and voices in videos. Typically, lip-sync detection techniques involve cropping the facial area of a given video, utilizing the lower half of the cropped box as input for the visual encoder to extract visual features. To enhance the emphasis on the articulatory region of lips for more accurate lip-sync detection, we propose utilizing a pre-trained visual attention-based encoder. The Visual Transformer Pooling (VTP) module is employed as the visual encoder, originally designed for the lip-reading task, predicting the script based solely on visual information without audio. Our experimental results demonstrate that, despite having fewer learning parameters, our proposed method outperforms the latest model, VocaList, on the LRS2 dataset, achieving a lip-sync detection accuracy of 94.5% based on five context frames. Moreover, our approach exhibits an approximately 8% superiority over VocaList in lip-sync detection accuracy, even on an untrained dataset, Acappella.

공중 포인팅을 위한 제스쳐 인식기반 핸드 헬드형 디바이스

서경은(Kyeongeun Seo),조현중(Hyeonjoong Cho) 한국HCI학회 2014 한국HCI학회 학술대회 Vol.2014 No.2

원격 거리에 있는 스크린을 제어하기 위한 기술로는 정밀한 센서가 탑재된 웨어러블 장치를 이용하는 방법과 스크린 쪽에 3D 센서을 설치하고 깊이 정보를 포함한 손의 움직임을 판단하여 제어하는 방법이 존재한다. 웨어러블기기를 활용한 방법은 섬세한 제어가 가능하다는 장점이 있으나 착용에 따른 불편함 등이 존재하고 설치형 3D 센서를 활용한 방법은 맨손으로 쉽게 제어할 수 있다는 장점이 있으나 섬세한 손의 움직임을 탐지하기 어렵고 센서의 탐지 범위를 벗어나면 제어가 불가능하다는 단점이 있다. 본 연구에서는 기존 방법의 단점을 극복하고 섬세한 제스처를 활용할 수 있는 핸드 헬드형 기기를 소개한다. 사용자들이 이미 익숙하게 사용하고 있는 TV 리모컨을 메타포로 차용하여 사용자가 쉽게 손에 쥘 수 있는 디자인을 고안하였으며 9축 자유도 센서를 이용하여 섬세한 손의 움직임을 탐지하도록 설계했다. 또한 버튼이 아닌 제스처 인식을 기반으로 하여 좀 더 자연스럽고 직관적인 제어가 가능하도록 하였으며 특히 비교적 섬세한 제스처인 엄지와 검지를 이용하는 핀치(pinch)를 활용할 수 있도록 설계되었다. 향후 원격 스크린 상에 표현되는 가상 버튼, 가상 다이얼 등 다양한 가상 위젯이 자연스러운 제스쳐와 접목 될 경우 원격 스크린 제어의 대안으로 발전 가능성이 있다고 판단된다. The gesture recognition-based controlling technology for a remote screen can be implemented either by wearable gloves equipped with various sensors or by 3D sensors established near the screen. The gloves enable subtle hand gestures to be detected but may cause inconvenience of wearing them whenever they are used. The 3D sensors-based gesture recognition allows users to control remote screens just with bare hands, but it may be difficult to detect subtle hand gestures and impossible to detect hand gestures out of range of sensing range. We focus on the middle ground between the aforementioned two methods to develop a user-friendly hand held device. The device is deigned to be easily held like the existing TV remote controllers and it is equipped with a 9 degree of freedom sensors, infrared emitters, and a infrared camera to detect subtle hand gestures. Especially, the device relies on pinching gestures that enable natural and intuitive control operation. When these gesture recognition is used together with virtual widgets like virtual buttons, virtual dials on remote screens, we believe that it has high potential to be an alternative remote controller in the near future.

디자인 패턴 지향 다중 프로세서를 위한 실시간 스케줄링 시뮬레이터

이종현 ( Chong-hyeon Lee ),조현중 ( Hyeonjoong Cho ) 한국정보처리학회 2009 한국정보처리학회 학술대회논문집 Vol.16 No.2

본 논문은 다중 프로세서에서의 다양한 실시간 스케줄링 기법을 지원하기 위해 객체 지향적으로 설계된 시뮬레이터를 제안한다. 다중 프로세서 기반 실시간 스케줄링의 특징을 반영한 설계 원칙에 따라 디자인 패턴을 적용하여 시뮬레이터의 재사용성과 확장성을 높였다.

멀티프로세서에서 (m, k)-firm Deadline 을 가지는 태스크 를 위한 실시간 스케줄링 알고리즘

공연화 ( Yeonhwa Kong ),조현중 ( Hyeonjoong Cho ) 한국정보처리학회 2010 한국정보처리학회 학술대회논문집 Vol.17 No.2

본 논문은 동종의 멀티코어에서 (m,k)-firm Deadline 을 가지는 태스크를 위한 실시간 시스템의 스케줄링 기법을 제안한다. 본 논문에서 제안된 알고리즘의 목적은 (m, k)-firm Deadline 을 만족시키는 확률을 증가시켜 최대의 Quality of Service 를 제공하는 것이다. 본 논문에서는 제안된 알고리즘이 QoS 를 보장함을 분석적으로 보이고 실험을 통해 알고리즘의 효율성을 검증한다.

제스처 기반 시각 비의존적 문자 입력 방법에 관한 연구

김미소(Miso Kim),김철원(Cheolwon Kim),전태웅(Taewoon Jeon),조현중(Hyeonjoong Cho) 한국HCI학회 2014 한국HCI학회 학술대회 Vol.2014 No.2

본 논문에서는 입력 위치에 구애 받지 않아 시각에 비의존적인 제스처 기반의 새로운 문자 입력 방법을 제안한다. 제안 방법은 키메뉴가 문장이 실제로 입력되는 커서 위치에 중첩되어 나타나며 커서의 위치를 쫓아 이동하기 때문에 제안 방법을 처음 접하는 사용자들도 그들이 입력하고 있는 문장 자체에 시각적으로 집중할 수 있다. 사용자는 원하는 위치에서 제스처를 시작하여 문자를 입력할 수 있으며 입력하는 손가락에 시선을 둘 필요가 없다. 시각적인 키메뉴 피드백과 제스처 감지부가 공간적으로 분리되어 있기 때문에 일반적인 모바일 터치스크린 디바이스 외에도 대형 디스플레이 또는 HUD 나 스마트 워치와 같은 웨어러블컴퓨터, 그리고 터치디바이스가 아닌 Kinect 까지 적용 범위가 광범위하다. 본 논문에서는 TV화면과 같은 원격의 대형 화면에 제안 방법을 적용하여 실험하였다. We present a novel gesture-based text entry method which makes the eyes of users free from watching their finger tips’ positions. When typing with this technique, users including not only experts but also novices can visually focus on sentences they are constructing. It is because the visual key array superimposes and chases the text cursor for guiding users’ visual attention to where the text is actually entered. When users are looking at the key array for typing, their text entry gestures are being read by certain gesture sensors that can be placed anywhere in the system even though it is out of the user’s sight. This spatial separation of the visual key array and the gesture sensing part increases the potential of using for a wide range of applications, for example, mobile phones, remotes for wall displays, wearable computing devices such as HUDs or smart watch and even Kinect what doesn’t have touchscreen, etc. In this paper, we applied this technique to entering Hangul for remote displays, e.g., TV screens.

멀티터치를 이용한 한글 입력 방식에 관한 연구

서우영 ( Woo-young Seo ),오한울 ( Han-wool Oh ),박홍진 ( Hong-jin Park ),김현수 ( Hyun-su Kim ),조현중 ( Hyeonjoong Cho ) 한국정보처리학회 2009 한국정보처리학회 학술대회논문집 Vol.16 No.2

최근 모바일 기기에서 입력방식으로 사용되기 시작한 멀티터치 입력방식은 지금까지와는 다른 다양한 방식의 입력을 가능하게 하였다. 기존 싱글 터치 입력 방식을 사용한 모바일 한글 입력방식의 특징을 파악하고 이를 기반으로 멀티터치 입력방식에 접목시켜 한글 입력방식을 연구함으로써 좀 더 직관적이고 차별화된 인터페이스를 제안한다.