DOI QR코드

DOI QR Code

Robust Face Alignment using Progressive AAM

점진적 AAM을 이용한 강인한 얼굴 윤곽 검출

  • 김대환 (홍익대학교 지능정보처리 연구실) ;
  • 김재민 (홍익대학교 지능정보처리 연구실) ;
  • 조성원 (홍익대학교 지능정보처리 연구실) ;
  • 장용석 (숭실대학교 정보통신전자공학부) ;
  • 김부균 (숭실대학교 정보통신전자공학부) ;
  • 정선태 (숭실대학교 정보통신전자공학부)
  • Published : 2007.02.28

Abstract

AAM has been successfully applied to face alignment, but its performance is very sensitive to initial values. In this paper, we propose a face alignment method using progressive AAM. The proposed method consists of two stages; modelling and relation derivation stage and fitting stage. Modelling and relation derivation stage first builds two AAM models; the inner face AAM model and the whole face AAM model and then derive the relation matrix between the inner face AAM model parameter vector and the whole face AAM model parameter vector. The fitting stage is processed progressively in two phases. In the first phase, the proposed method finds the feature parameters for the inner facial feature points of a new face, and then in the second phase it localizes the whole facial feature points of the new face using the initial values estimated utilizing the inner feature parameters obtained in the first phase and the relation matrix obtained in the first stage. Through experiments, it is verified that the proposed progressive AAM-based face alignment method is more robust with respect to pose, and face background than the conventional basic AAM-based face alignment.

AAM은 얼굴 윤곽 검출에 잘 적용되어 왔으나 초기값에 민감하다는 특성을 가지고 있다. 본 논문에서는 점진적 AAM을 이용한 얼굴 윤곽 검출 방법을 제안한다. 제안한 방법은 얼굴 모델 구성 및 관계 추출 단계와 얼굴 윤곽 검출 단계의 2단계로 구성된다. 얼굴 모델 구성 및 관계 추출 단계에서는 먼저 얼굴 내부 영역만으로 구성된 얼굴 내부 AAM 모델 구성과 얼굴 전체 영역으로 구성된 얼굴 전체 AAM 모델 구성을 수행한 후에, 이후 얼굴 내부 AAM 모델 파라미터 벡터와 얼굴 전체 AAM 모델 파라미터 벡터간의 관계 행렬을 추출한다. 얼굴 윤곽 검출 단계는 2단계 절차로 수행된다. 먼저 새로 입력되는 얼굴 이미지에 대해 얼굴 내부 AAM 모델을 맞추어 얼굴 내부에 대한 특징 파라미터 벡터를 구한다. 이후 얼굴 모델 구성 및 관계 추출 단계에서 구한 관계 행렬과 첫 단계에서 구한 얼굴 내부 특징 파라미터 벡터를 이용하여 얼굴 전체 AAM 특징 파라미터 벡터에 대한 초기값을 추정하고 이를 이용하여 새로 입력되는 얼굴 이미지에 대해 얼굴 전체 AAM 모델을 맞추어 전체 얼굴 윤곽 검출을 수행한다. 실험을 통해 제안된 점진적 AAM 기반 얼굴 윤곽 검출 방법이 자세, 얼굴 배경 등에 대해 기존 기본 AAM 기반 얼굴 검출 방법보다 더 강인한 것으로 확인되었다.

Keywords

References

  1. S.Z. Li and A.K, Jain,Handbook of Face Recongnition, Springer, 2004.
  2. 조경식, 김용구, 이양복, "Active Appearance Model과 EFM을 이용한 실시간 얼굴 표정 인식시스템", 한국정보과학회 제33회 추계학술발표회 논문집 B권, pp.437-441, 2006(10).
  3. S. Z. Li, Y. S. cheng, H. J. Zhang, and Q. S. Cheng, ''Multi-view face alignment using direct apperance models, " 5th Automatic Face and Gesture Recongnition, pp.324-329, 2002.
  4. F. Jiao, S. Z. Li, H Y. Shum, and D. Schuurmans,'Face Alignment Using Statistical Models and Wavelet Features," Proc. 2003 IEEE Computer Society Conf. on Computer Vision and Pattern Recongnition, Vol.1,pp,l-321-I-327, June 2003.
  5. Y. Huang, S. Lin, S. Z. Li, H Lu, and H Y. Shum, "Face Alignment Under Variable lliumination," Proc. Sixth IEEE Int'1 Conf. on Automatic Face and Gesture Recongnition,pp.85-90, May 2004.
  6. S. Xin and H Ai, ''Face Aligmnent Under Various Poses and Expressions," 1st Affective Computng and Intelligent Interaction, lNCS 3784, pp.40-47, 2005.
  7. L. Zhang, H. Al, S. XIN, C. HUANG, S. TSUKIJI and S. LAO, "Robust Face Alignment Based on Local Texture Classifiers," IClP 2005.IEEE Int''1 Conf. on Image processing, Vol.2, pp.354-357, Sep. 2005.
  8. G. Edwards, C. J. Taylor, and T. F. Cootes, Interpreting Face Images using Active Appearance Models," Proc. IEEE Int. Conf. Automatic Face and Gesture Recognition, pp. 300-305,1998.
  9. T. F. Cootes, G. J. Edwards, C. J. Taylor, H. Burkhardt, and B. Neuman, "Active Apperance Models" Proc. Eur. Conf. Computer Vision, Vol.2, pp.484-498,1998.
  10. T. F. Cootes, D. J. Edwards, and S. J. Taylor, "Active Apperance Models," IEEE Trans. Pattern Anal. Mach. Intell, Vol.23, No.6, pp.681-685, Jun. 2001. https://doi.org/10.1109/34.927467
  11. L. Nattehews and S. Baker, "Active Appearance Models Revisited," Intemational Journal of Computer Vision, Vol.60, No.2, pp.135-164, Nov. 2004. https://doi.org/10.1023/B:VISI.0000029666.37597.d3
  12. A U. Batur and M H. Hayes, "Adaptive Active Appearance Models," IEEE Transactions on Image Processing, Vol.14,Issue 11, pp.1707-1721, Nov. 2005. https://doi.org/10.1109/TIP.2005.854473
  13. D. Cristinancce, T. Cootes, and I. Scott, "A Multi-Stage Approach to Facial Feature Detection," Proc. British Machine Vision Conference 2004, Vol.1, pp.277- 286, 2004.
  14. S. Boyd and L. Vandenberghe, Convex Optirruzation, Cambridge University Press, March 2004.
  15. J.C. Gower, 'Generalized Prcrustes Analysis;"Psychornetrika, Vol.40, pp.33- 51, 1975. https://doi.org/10.1007/BF02291478
  16. D. T. Lee and B. J. Schachter, "Two Algorithms for Constructing a Delaunay Triangulation," Int. J. Cornputer Inforrnation, Sci.9, pp.219-242, 1980.
  17. htp://www2.imm.dtu.dk/-aam/