3D Facial Modeling and Synthesis System for Realistic Facial Expression

자연스러운 표정 합성을 위한 3차원 얼굴 모델링 및 합성 시스템

  • 심연숙 (연세대학교 인지과학 협동과정) ;
  • 김선욱 (연세대학교 컴퓨터과학과) ;
  • 한재현 (연세대학교 인지과학 협동과정) ;
  • 변혜란 (연세대학교 컴퓨터과학과) ;
  • 정창섭 (연세대학교 심리학과)
  • Published : 2000.06.01

Abstract

Realistic facial animation research field which communicates with human and computer using face has increased recently. The human face is the part of the body we use to recognize individuals and the important communication channel that understand the inner states like emotion. To provide the intelligent interface. computer facial animation looks like human in talking and expressing himself. Facial modeling and animation research is focused on realistic facial animation recently. In this article, we suggest the method of facial modeling and animation for realistic facial synthesis. We can make a 3D facial model for arbitrary face by using generic facial model. For more correct and real face, we make the Korean Generic Facial Model. We can also manipulate facial synthesis based on the physical characteristics of real facial muscle and skin. Many application will be developed such as teleconferencing, education, movies etc.

최근 사용자에게 친근감있는 인터페이스를 제공하기 위해 자연스러운 얼굴 애니메이션에 대한 연구가 활발히 진행 중이다. 얼굴은 인간의 신체부위 중 가장 쉽게 개개인을 구분할 수 있고, 감정과 정서 등의 내적 상태를 명백하게 이해할 수 있도록 해주는 중요한 의사소통의 수단으로 여겨지고 있다. 이러한 얼굴은 이용하여 인간과 컴퓨터간의 의사 전달에 있어서 효율적으로 인간의 감정을 인식하고 전달하여 대화할 수 있도록 하기 위해서 컴퓨터상의 얼굴은 인간과 유사하게 대화할 수 있고, 감정을 표현할 수 있도록 친숙하고 현실감이 있어야 한다. 본 논문에서는 자연스러운 얼굴의 합성을 위한 얼굴 모델링 및 애니메이션 방법을 제안하였다. 특정한 사람을 모델로 한 얼굴 애니메이션을 위하여 우선 3차원 메쉬로 구성된 일반 모델(generic model)을 특성 사람에게 정합하여 특정인의 3차원 얼굴 모델을 얻을 수 있다. 본 논문에서는 기존 연구들과 다르게 표준 한국인 얼굴을 이용한 일반 모델을 생성하여, 임의의 얼굴에 대하여 좀 더 정확하고 자연스러운 3차원 모델이 이루어질 수 있도록 하였다. 그리고 얼굴 표정합성을 위하여, 실제 얼굴의 근육 및 피부 조직 등 해부학적 구조에 기반한 근육 기반 모델 방법을 사용하여 현실감 있고 자연스러운 얼굴 애니메이션이 이루어질 수 있도록 하였다. 이러한 얼굴 모델링 및 합성 기술은 화상회의, 가상현실, 교육, 영화 등 여러 분야에서 활용될 수 있다.

Keywords

References

  1. Computer Facial Animation Parke, F. I.;Keith Waters
  2. Final Report to NSF of the Standards for Facial Animation Workshop Catherine Pelachaud;Norman Badler;Marie-Luce Viaud
  3. ACM National Conference Computer generated animation of faces Parke, F. I.
  4. Analysis Interpretation and Synthesis of Facial Expression Irfan, A. Essa.
  5. A Parametric Model for Human Faces Parke, F. I.
  6. IEEE Trans. on PAMI v.15 no.6 Analysis and Synthesis of Facial Image Sequences Using Physical and Anatomical Model Tezopoulos, Demetri;Keith Waters
  7. Facial Action Coding System Ekman, P.;Feiesen, W. V.
  8. SIGGRAPH Facial Deformation for MPEG-4 Escher, Marc;Pandzic, Igor;Thalmann,Nadia Magenenat
  9. SNHC Verification Model 5.0 ISO/IEC JUC1/SC29/WG11/MPEG97 N1820
  10. Signal Proc. Image Com. v.1 no.2 Model-Based Analysis Synthesis Image Coding System for a Person's Face Aizawa, K.;Harashima, H.;Satio, T.
  11. Signal Proc.Image Com. v.1 no.2 Model-Based Analysis Synthesis Image Coding System for a Person's Face Aizawa, K.;Harashima, H.;Satio, T.
  12. 한국통신학회 논문지 '94-4 v.19 no.4 Lip Shape Synthesis of the Korean Syllable for Human Interface Lee, Yong Dong;Choi, Chang Seok;Choi, Kap Seok
  13. Computer Graphics v.15 no.3 Animating Facial Expressions Platt, S. M.;Balder, N.
  14. ATR Symposium on the Face and Object Recognition Muscle Based Face Synthesis Driven by EMG data Yosukura, T.;Moroshima, S.