얼굴 인식 기술을 활용한 실감형 인터랙티브 콘텐츠의 구현 - (르네마그리트 특별전) AR포토존을 중심으로 = Implementation of Immersive Interactive Content Using Face Recognition Technology - (Exhibition of ReneMagritte) Focused on 'ARPhotoZone'

다국어 초록 (Multilingual Abstract)

Biometric technology with the advance of deep learning enabled the new types of content. Especially, face recognition can provide immersion in terms of convenience and non-compulsiveness, but most commercial content has limitations that are limited to application areas. In this paper, we attempted to overcome these limitations, implement content that can utilize face recognition technology based on realtime video feed. We used Unity engine for high quality graphics, but performance degradation and frame drop occurred. To solve them, we augmented Dlib toolkit and adjusted the resolution image.

국문 초록 (Abstract)

딥러닝의 발전에 따른 생체 인식 기술은 새로운 형태의 콘텐츠를 생산해 낼 수 있게 하였다. 특히 얼굴 인식 기술의 경우 편의성·비강제성 면에서 몰입감을 줄 수 있지만, 대부분의 상용 콘텐츠는 어플리케이션 영역에만 그치는 한계성을 가진다. 따라서 본 논문은 이를 극복하여 실시간 비디오 피드를 기반으로 얼굴 인식 기술을 활용할 수 있는 실감형 인터렉티브 콘텐츠를 구현하고자 한다. 고해상도의 그래픽을 위해 Unity 엔진을 사용하여 제작되었고 그 과정에서 얼굴인식 성능 저하와 프레임 드랍(Frame Drop) 현상이 발생하여 추가적으로 Dlib 툴킷을 사용하고, 얼굴인식 이미지의 해상도를 조절함으로 해당 문제를 해결했다.

참고문헌 (Reference)

1 박병준, "얼굴 특징을 이용한 얼굴영역 검출에 관한 연구" 한국정보전자통신기술학회 13 (13): 206-211, 2020

2 심윤선, "생체정보기술을 융합한 메타포적 미디어 공간의 구축" 한국전시산업융합연구원 38 (38): 219-229, 2020

3 이영주, "공간디자인에서 색채 대비에 의한 시지각적 연속성에 관한 연구" 한국공간디자인학회 5 (5): 91-101, 2010

4 Viola, "Rapid Object Detection using a Boosted Cascade of Simple Features" 1-8, 2001

5 A. Zelinsky, "Learning OpenCV---Computer Vision with the OpenCV Library (Bradski, G.R. et al.; 2008)[On the Shelf]" 16 (16): 100-100, 2009

6 Byung-Hwa Park, "Influence of Facial Shape and Texture on Human Face Recognition" The HCI Society of Korea 78-81, 2017

7 N. Dalal, "Histograms of oriented gradients for human detection" 886-893, 2005

8 Kyoung Yul Bae, "Histogram Analysis for Performance Improvement of Face Recognition" 2 : 1-14, 2003

9 Moon Hyun Joon, "Face Recognition: A Survey" 1683-1688, 2008

10 Davis E. King, "Dlib-ml: A Machine Learning Toolkit" 10 : 1755-1758, 2009

11 Park Beom Geun, "Biometric Technology and Market Trends" S&T 1-28, 2016

12 Hwang Won-joon, "A Survey of Face Recognition Technique for Real Media Processing" 19 (19): 111-122, 2014