홀로렌즈에서 시선 추적 및 손동작 인식을 이용한 통합 인터페이스 시스템 = Integrated Interface System using Eye-Gaze Tracking and Hand Gesture Recognition with HoloLens

국문 초록 (Abstract)

증강현실 (Augmented Reality, AR) 기기인 홀로렌즈가 기본적으로 제공하는 사용자 인터페이스 방식은 머리의 움직임 (Head-Gaze)에 따라서 커서를 움직이고, 전면에 있는 카메라의 화각 내에서 간단한 손동작을 인식하여 조작한다. 따라서 사용자가 하나의 작업을 수행하기 위해서는 머리를 움직여서 관심영역에 커서를 맞추고, 팔을 눈높이까지 들어 올려 손동작 인식을 수행해야 한다. 이와 같은 일련의 행동들은 사용자의 목과 팔에 피로를 일으킨다. 본 논문은 홀로렌즈에서 좀 더 직관적이고 자연스러운 사용자 인터페이스 (Natural User Interface, NUI)를 위해 동공 추적 카메라를 이용한 시선 (Eye-Gaze) 추적 및 ToF 깊이 센서를 이용한 손동작 인식 기반의 통합 인터페이스 시스템을 제안한다. 동공 추적 카메라로 사용자의 시선 위치에 따라 커서를 움직이고, 깊이 센서로 가슴 아래 위치에서 팔을 높이 들지 않고 편안하게 손동작 인식을 수행한다. 향후 본 논문에서 제시한 통합 인터페이스 시스템을 이용하여 홀로렌즈를 비롯한 HMD 에서 다양한 인터랙션을 적용시킬 수 있을 것이다.

목차 (Table of Contents)

• 요약문
• 1. 서론
• 2. 본문
• 3. 결론
• 참고문헌