DOI QR코드

DOI QR Code

각 분할 스핀 영상을 사용한 3차원 얼굴 특징점 검출 방법

Robust 3D Facial Landmark Detection Using Angular Partitioned Spin Images

  • 김동현 (한국기술교육대학교 전기전자통신공학과) ;
  • 최강선 (한국기술교육대학교 전기전자통신공학과)
  • Kim, Dong-Hyun (Department of Electrical, Electronics and Communication Engineering, Korea University of Technology and Education) ;
  • Choi, Kang-Sun (Department of Electrical, Electronics and Communication Engineering, Korea University of Technology and Education)
  • 투고 : 2013.01.07
  • 발행 : 2013.05.25

초록

스핀 영상은 3차원 표면의 특징을 효과적으로 표현하기 때문에 3차원 얼굴에서 특징점을 검출하는데 많이 이용된다. 하지만 기존의 스핀 영상은 표면의 법선 벡터 방향에 따라 매우 다른 스핀 영상이 만들어지는 단점이 있다. 또한 해당 영역 내에 존재하는 모든 점을 2차원으로 변환하여 고려하기 때문에 3차원 표면 특징이 모호해질 수 있다. 본 논문에서는 검색 영역을 분할한 스핀 영상을 이용하는 3차원 얼굴 특징점 검출 방법을 제안하였다. 기준점으로부터 떨어진 각도에 따라 검색범위를 분할하여 분할된 영역 내 점들에 대해 스핀 영상을 구성하여 방향에 따른 특징 추출을 극대화했다. 법선 벡터 평탄화를 이용하여 표면 법선 벡터 방향에 대한 잡음 민감성을 줄여 정확한 형태의 스핀 영상을 얻도록 했다. 실험을 통해 제안한 방법으로 찾은 특징점과 실측 특징점과의 거리차를 비교하여 기존방법에 비해 약 34% 향상된 정확도를 얻음을 확인했다.

Spin images representing efficiently surface features of 3D mesh models have been used to detect facial landmark points. However, at a certain point, different normal direction can lead to quite different spin images. Moreover, since 3D points are projected to the 2D (${\alpha}-{\beta}$) space during spin image generation, surface features cannot be described clearly. In this paper, we present a method to detect 3D facial landmark using improved spin images by partitioning the search area with respect to angle. By generating sub-spin images for angular partitioned 3D spaces, more unique features describing corresponding surfaces can be obtained, and improve the performance of landmark detection. In order to generate spin images robust to inaccurate surface normal direction, we utilize on averaging surface normal with its neighboring normal vectors. The experimental results show that the proposed method increases the accuracy in landmark detection by about 34% over a conventional method.

키워드

참고문헌

  1. W. Zhao, R. Chellappa, and A. Rosenfeld, "Face recognition: a literature survey," ACM Computing Surveys, vol. 35, no. 4, pp. 399-458, Dec. 2005.
  2. 이형지, 정재호, "밝기, 명암도, 크기, 회전, 위치 변화에 강인한 얼굴인식," 전자공학회 논문지, 제 47권 SP편, 제 1호, 35-43쪽, 2010년 1월
  3. 이상섭, 이수영, 김중규, "조명 환경에 강인한 얼굴 인식 성능향상을 위한 Bilateral 필터 기반 조명 정규화 방법에 관한 연구," 전자공학회 논문지, 제 47권 SP편, 제 4호, 49-55쪽, 2010년 4월
  4. J. Kittler, A. Hilton, M. Hamouz, and J. Illingworth, "3D assisted face recognition: A survey of 3D imaging, modelling and recognition approaches," Proc. of IEEE Conf. on Computer Vision and Pattern Recognition, pp. 114-121, Washington DC, USA, June 2005.
  5. C. Samir, A. Srivastava, and M Daoudi, "Three-dimensional face recognition using shapes of facial curves," IEEE Trans. Pattern Analysis And Machine Intelligence, vol. 28, no. 11, pp. 1858-1864, Nov. 2006. https://doi.org/10.1109/TPAMI.2006.235
  6. E. Vezzetti, and F. Marcolin, "3D human face description: landmarks measures and geometrical features," Image and Vision Computing, vol. 30, pp. 698-712, 2012. https://doi.org/10.1016/j.imavis.2012.02.007
  7. C. Dorai and A. K. Jain, "COSMOS-A Representation Scheme for 3D Free-Form Objects," IEEE Trans. Pattern Analysis And Machine Intelligence, vol. 19, no. 10, pp. 1115-1130, Oct. 1997. https://doi.org/10.1109/34.625113
  8. E. Johnson and M. Hebert, "Using spin images for efficient object recognition in cluttered 3d scenes," IEEE Trans. Pattern Analysis And Machine Intelligence, vol. 21, no. 5, pp. 433-449, May 1999. https://doi.org/10.1109/34.765655
  9. Y. Wang, J. Liu, and X. Tang, "Robust 3D face recognition by local shape difference boosting," IEEE Trans. Pattern Analysis And Machine Intelligence, vol. 32, no. 10, pp. 1858-1870, Oct. 2010. https://doi.org/10.1109/TPAMI.2009.200
  10. P. Szeptycki, M. Ardabilian, and Limimg Chen, "A coarse-to-fine curvature analysis-based rotation invariant 3D face landmarking," Conf. Biomerics: Theory, Applications, and Systems, Lyon, France, pp. 1-6, Sept. 2009.
  11. P. Perakis, T.Theoharis, G. Passalis, and I.A Kakadiaris, "Automatic 3D facial region retrieval from multi-pose facial datasets," Proc. Eurographics Workshop on 3D Object Retrieval, Munich, Germany, pp. 37-44, Mar. 2009.
  12. A.B. Moreno and A. Sanchez, "GavabDB: A 3D face database," Proc. COST275 Workshop on Biometrics on the Internet, Vigo, Spain, pp. 75-80, Mar. 2004.