DOI QR코드

DOI QR Code

얼굴 표정공간에서 최적의 표정전이경로 자동 설정 방법

Auto Setup Method of Best Expression Transfer Path at the Space of Facial Expressions

  • 김성호 (상지대학교 컴퓨터정보공학부)
  • 발행 : 2007.04.30

초록

본 논문은 애니메이터로 하여금 표정공간으로부터 임의의 표정상태 수 개를 선택하도록 하면, 최적의 표정전이경로를 자동적으로 설정하도록 해줌으로써, 얼굴 표정 애니메이션을 실시간적으로 생성하거나 표정 제어가 가능하도록 하기 위한 기법을 기술한다. 표정공간은 약 2500개의 얼굴 표정상태 간의 거리를 구하고, 다차원 스케일링 기법을 사용하여 2차원 평면에 분포시킴으로서 형성된다. 표정공간에서 최적의 표정전이경로를 설정하기 위해서는 임의의 얼굴 표정상태를 기준으로 사분면처럼 4개의 영역으로 나눈다. 그리고 각 영역별로 최단거리에 존재하는 열굴 표정상태를 결정하고, 그 중에서 가장 가까운 얼굴 표정상태를 선택하여 전이시키고, 전이가 끊어진 얼굴 표정상태에서는 두 번째, 세 번째 혹은 네 번째로 가까운 얼굴 표정상태를 선택하여 순서대로 전이시킴으로써 완전한 표정전이경로가 결정된다. 그리고 애니메이터가 표정공간에서 대표적인 수 개의 표정상태만을 선택해주면 시스템은 자동적으로 최적의 표정전이경로를 설정하여 준다. 본 논문은 애니메이터들로 하여금 본 시스템을 사용하여 얼굴 애니메이션을 생성하거나 표정 제어를 수행하도록 하였으며, 그 결과를 평가한다.

This paper presents a facial animation and expression control method that enables the animator to select any facial frames from the facial expression space, whose expression transfer paths the system can setup automatically. Our system creates the facial expression space from approximately 2500 captured facial frames. To create the facial expression space, we get distance between pairs of feature points on the face and visualize the space of expressions in 2D space by using the Multidimensional scaling(MDS). To setup most suitable expression transfer paths, we classify the facial expression space into four field on the basis of any facial expression state. And the system determine the state of expression in the shortest distance from every field, then the system transfer from the state of any expression to the nearest state of expression among thats. To complete setup, our system continue transfer by find second, third, or fourth near state of expression until finish. If the animator selects any key frames from facial expression space, our system setup expression transfer paths automatically. We let animators use the system to create example animations or to control facial expression, and evaluate the system based on the results.

키워드

참고문헌

  1. 김성호, 정문렬, '얼굴 표정공간의 계층적 가시화', 한국정보과학회논문지, 제31권 제12호., pp.726-734, 2004
  2. 김성호, 정문렬, '모션 데이터를 이용한 3차원 아바타 얼굴 표정 제어', 한국정보처리학회논문지, 제11-A권, 제5호, pp. 383 390, 2004 https://doi.org/10.3745/KIPSTA.2004.11A.5.383
  3. Frederic I. Parke, Keith Waters. 'Computer facial animation,' A K Peters, 1996
  4. Vlasic, D., Brand, M., Pfister, H., Popovie, J., 'Face transfer with Multilinear Models', ACM Transactions on Graphics(TOG), Vol.24, pp.426 433, 2005 https://doi.org/10.1145/1073204.1073209
  5. Zhigang Deng, Pei Ying Chiang, Pamela Fox, Ulrich Neumann, 'Animating blendshape faces by cross mapping motion capture data', Proceeding of the 2006 symposium on Interactive 3D graphics and games 2006, pp. 43 48, 2006 https://doi.org/10.1145/1111411.1111419
  6. Douglas Fidaleo, Ulrich Neumann, 'Analysis of co-articulation regions for performance driven facial animation', Journal of Visualization and Computer Animation, Vol.15, pp.15 26, 2004 https://doi.org/10.1002/cav.4
  7. Lee, J., J. Chai, P. S. A. Reitsma, J. K. Hodgins, and N. S. Pollard, 'Interactive Control of Avatars Animated with Human Motion Data', ACM Transactions on Graphics(SIGGRAPH 2002), Vol.21, No.3, pp.491 500, 2002 https://doi.org/10.1145/566570.566607
  8. Jun-Yong Noh and Ulrich Neumann, 'Expression cloning', In Proceedings of SIGGRAPH 2001, pp.21 28, 2001 https://doi.org/10.1145/383259.383290
  9. J. B. Tenenbaum, V. de Silva, and J. C. Langford, 'A global geometric framework for nonlinear dimensionality reduction', Science, Vol.290, No.5500, pp.2319 2323, 2000 https://doi.org/10.1126/science.290.5500.2319
  10. Cyriaque Kouadio, Pierre Poulin, and Pierre Lachapelle, 'Real time facial animation based upon a bank of 3D facial expressions,' Proc. Computer Animation 98, June 1998 https://doi.org/10.1109/CA.1998.681917
  11. M. Polito and P.Perona, 'Grouping and dimensionality reduction by locally linear embedding', In NIPS. 2001
  12. S. Roweis and L. Saul., 'Nonlinear dimensionality reduction by locally linear embedding', Science, Vol.290, No.5500, pp.2323 2326, 2000 https://doi.org/10.1126/science.290.5500.2323