모션 데이터에 Isomap을 사용한 3차원 아바타의 실시간 표정 제어 = Realtime Facial Expression Control of 3D Avatar by Isomap of Motion Data

다국어 초록 (Multilingual Abstract)

This paper describe methodology that is distributed on 2-dimensional plane to much high-dimensional facial motion datas using Isomap algorithm, and user interface techniques to control facial expressions by selecting expressions while user navigates this space in real-time. Isomap algorithm is processed of three steps as follow; first define an adjacency expression of each expression data, and second, calculate manifold distance between each expressions and composing expression spaces. These facial spaces are created by calculating of the shortest distance(manifold distance) between two random expressions. We have taken a Floyd algorithm for it. Third, materialize multi-dimensional expression spaces using Multidimensional Scaling, and project two dimensions plane. The smallest adjacency distance to define adjacency expressions uses Pearson Correlation Coefficient. Users can control facial expressions of 3-dimensional avatar by using user interface while they navigates two dimension spaces by real-time.

국문 초록 (Abstract)

본 논문은 Isomap 알고리즘을 사용하여 다량의 고차원 얼굴 모션 데이터를 2차원 평면에 분포시키는 방법론과, 사용자가 이 공간을 항해하면서 원하는 표정들을 선택함으로써 실시간적으로 얼굴 표정 제어가 가능한 사용자 인터페이스 기법에 대하여 기술한다. Isomap 알고리즘은 세 단계의 과정으로 처리된다. 첫째, 각 표정 데이터의 인접표정을 정의하고, 둘째, 각 표정들 사이의 다양체 거리를 계산하여 표정공간을 구성한다. 표정공간의 생성은 임의의 두 표정간의 최단거리(다양체 거리)의 결정으로 귀결되고, 이를 위해 플로이드 알고리즘을 이용한다. 셋째, 다차원 표정공간을 가시화하기 위해서 다차원 스케일링을 사용하며, 2차원 평면에 투영시킨다. 인접표정을 정의하기 위한 최소 인접거리는 피어슨의 상관계수를 이용한다. 3차원 아바타의 얼굴 표정 제어는 사용자 인터페이스를 사용하여 2차원 공간을 항해하면서 실시간으로 제어한다.

참고문헌 (Reference)

1 Uprendra Shardanand, "Social information filtering for music recommendation" MIT 1994

2 C. Kouadio, "Real-time facial animation based upon a bank of 3D facial expressions" 1998

3 W. S. Torgerson, "Multidimensional scaling: I. theory and method" 17 : 401-419, 1952

4 T. Cox, "Multidimensional Scaling" Chapman & Hall 1994

5 H. J. Shin, "Motion Synthesis and Editing in Low-Dimensional Spaces, In Computer Animation and Virtual Worlds (Special Issue: CASA 2006)" John Wiley & Sons 219-227, 2006

6 B. Guenter, "Making Faces" 55-66, 1998

7 J. Lee, "Interactive Control of Avatars Animated with Human Motion Data" 21 (21): 491-500, 2002

8 D. Terzopoulos, "Facial animation : Past, present and future" 1997

9 D. Vlasic, "Face Transfer with Multilinear Models" 24 : 426-433, 2005

10 F. I. Parke, "Computer facial animation" A K Peters 1996

11 Z. Deng, "Animating blendshape faces by cross-mapping motion capture data" 43-48, 2006

12 D. Fidaleo, "Analysis of co-articulation regions for performance-driven facial animation" 15 : 15-26, 2004

13 R. W. Floyd, "Algorithm 97 : Shortest Path" 5 : 345-, 1962