손 제스처 기반의 애완용 로봇 제어

국문 초록 (Abstract)

본 논문에서는 애완용 로봇에 장착된 카메라로부터 획득된 연속 영상에서 사용자의 손 제스처를 인식하여 로봇을 제어하는 시스템을 제안한다. 제안된 시스템은 손 검출, 특징 추출, 제스처 인식, 로봇제어의 4단계로 구성된다. 먼저 카메라로부터 입력된 영상에서 HSI 색상공간에 정의된 피부색 모델과 연결성분 분석을 이용하여 손 영역을 검출한다. 다음은 연속 영상에서 손 영역의 모양과 움직임에 따른 특징을 추출한다. 이때 의미 있는 제스처의 구분을 위해 손의 모양을 고려한다. 그 후에 손의 움직임에 의해 양자화된 심볼들을 입력으로 하는 은닉 마르코프 모델을 이용하여 손 제스처는 인식된다. 마지막으로 인식된 제스처에 대응하는 명령에 따라 애완용 로봇이 동작하게 된다. 애완용 로봇을 제어하기 위한 명령으로 앉아, 일어서, 엎드려, 악수 등의 제스처를 정의하였다. 실험결과로 제안한 시스템을 이용하여 사용자가 제스처로 애완용 로봇을 제어 할 수 있음을 보였다.

다국어 초록 (Multilingual Abstract)

In this paper, we propose the pet robot control system using hand gesture recognition in image sequences acquired from a camera affixed to the pet robot. The proposed system consists of 4 steps; hand detection, feature extraction, gesture recognition and robot control. The hand region is first detected from the input images using the skin color model in HSI color space and connected component analysis. Next, the hand shape and motion features from the image sequences are extracted. Then we consider the hand shape for classification of meaning gestures. Thereafter the hand gesture is recognized by using HMMs (hidden markov models) which have the input as the quantized symbol sequence by the hand motion. Finally the pet robot is controlled by a order corresponding to the recognized hand gesture. We defined four commands of sit down, stand up, lie flat and shake hands for control of pet robot. And we show that user is able to control of pet robot through proposed system in the experiment.

목차 (Table of Contents)

• 요약
• Abstract
• 1. 서론
• 2. 손 검출
• 3. 특징 추출
• 4. 제스처 인식
• 5. 로봇 제어
• 6. 실험 및 결과
• 7. 결론
• 참고문헌

참고문헌 (Reference)

1 한국 과학 기술 정보연구원, "엔터테인먼트 로봇 기술 동향"

2 W.T. Freeman, "Television control by hand gesture" 1995

3 H.D. Moon, "Recognition of Conducting Motion using HMM" Korea Institute of Information Scientists and Engineers 2004

4 X.D. Huang, "Hidden Markov Models for Speech Recognition" Edinburgh Univ. Press 1990

5 A. Chalechale, "Hand Gesture Selection and Recognition for Visual-Based Human-machine Interface" 22-25, 2005

6 H.S. Park, "HMM-Based Gesture Recognition for Robot Control”, LNCS 3522"

7 M.C.Moy, "Gesture-based interaction with a pet robot" 628-633, 1999

8 C. Kray, "Gesture-based Interface Reconfiguration" AIMS 2003

9 K.S. Kwon, "Gesture based HTPC Interface" Korea Institute of Information Scientists and Engineers 2004

10 H. Lee, "An HMM-based Threshold Model Approach for Gesture Recognition" 21 (21): 961-973, 1999

11 L.R.Rabiner, "A Tutorial on Hidden Markov Models and Selected applications in Speech Recognition" 77 (77): 257-286, 1989

12 S.K. Singh, "A Robust Skin Color Based Face Detection Algorithm" 6 (6): 227-234, 2003

13 A. Malima, "A Fast Algorithm for Vision-Based Hand Gesture Recognition for Robot Control.” IEEE"