Multi-classifier Decision-level Fusion for Face Recognition

다중 분류기의 판정단계 융합에 의한 얼굴인식

  • Yeom, Seok-Won (Daegu University, Division of Computer and Communication Engineering)
  • 염석원 (대구대학교 정보통신공학부)
  • Received : 2011.10.20
  • Accepted : 2012.06.11
  • Published : 2012.07.25

Abstract

Face classification has wide applications in intelligent video surveillance, content retrieval, robot vision, and human-machine interface. Pose and expression changes, and arbitrary illumination are typical problems for face recognition. When the face is captured at a distance, the image quality is often degraded by blurring and noise corruption. This paper investigates the efficacy of multi-classifier decision level fusion for face classification based on the photon-counting linear discriminant analysis with two different cost functions: Euclidean distance and negative normalized correlation. Decision level fusion comprises three stages: cost normalization, cost validation, and fusion rules. First, the costs are normalized into the uniform range and then, candidate costs are selected during validation. Three fusion rules are employed: minimum, average, and majority-voting rules. In the experiments, unfocusing and motion blurs are rendered to simulate the effects of the long distance environments. It will be shown that the decision-level fusion scheme provides better results than the single classifier.

얼굴인식 기술은 지능형 보안, 웹에서 콘텐츠 검색, 지능로봇의 시각부분, 머신인터페이스 등, 활용이 광범위 하다. 그러나 일반적으로 대상자의 표정과 포즈 변화, 주변의 조명 환경과 같은 문제가 있으며 이와 더불어 원거리에서 획득한 영상의 경우 저해상도를 비롯하여 블러와 잡음에 의한 영상의 열화 등의 여러 가지 어려움이 발생한다. 본 논문에서는 포톤 카운팅(Photon-counting) 선형판별법(Linear Discriminant Analysis)을 이용한 다중 분류기(Classifier)에 의한 판정을 융합하여 얼굴 영상 인식을 수행한다. Fisher 선형판별법은 집단 간 분산을 최대로 하고 집단 내 분산을 최소로 하는 공간으로 선형 투영하는 방법으로, 학습영상의 수가 적을 경우 특이행렬 문제가 발생하지만 포톤카운팅 선형 판별법은 이러한 문제가 없으므로 차원축소를 위한 전 처리 과정이 필요 없다. 본 논문의 다중 분류기는 포톤 카운팅 선형판별법의 유클리드 거리(Euclidean Distance) 또는 정규화된 상관(Normalized Correlation)을 적용하는 판정규칙에 따라 구성된다. 다중분류기의 판정의 융합은 각 분류기 cost의 정규화(Normalization), 유효화(Validation), 그리고 융합규칙(Fusion Rule)으로 구성된다. 각 분류기에서 도출된 cost는 같은 범위로 정규화된 후 유효화 과정에서 선별되고 Minimum, 또는 Average, 또는 Majority-voting의 융합규칙에 의하여 융합된다. 실험에서는 원거리에서 획득한 효과를 구현하기 위하여 고해상도 데이터베이스 영상을 인위적으로 Unfocusing과 Motion 블러를 이용하여 열화하여 테스트하였다. 실험 결과는 다중분류기 융합결과의 인식률은 단일분류기보다 높다는 것을 보여준다.

Keywords

References

  1. 조재수, 강현수, 김흥수, 김성득, "멀티미디어 신호 처리: 이론 및 실습," 사이텍 미디어, 2006.
  2. D. L. Swets and J. Weng, "Using discriminant eigenfeatures for image retrieval," IEEE Trans. Pattern Analysis and Machine Intelligence. Vol. 18, pp. 831-836, 1996. https://doi.org/10.1109/34.531802
  3. P. N. Belhumer, J. P. Hespanha, and D. J. Kriegman, "Eigenfaces vs. Fisherfaces: recognition using class specific linear projection," IEEE Trans. Pattern Analysis and Machine Intelligence. Vol. 19, No. 7, pp. 711-720, 1997. https://doi.org/10.1109/34.598228
  4. 김현철, 김대진, 방승양, "LDA 혼합 모형을 이용한 얼굴인식," 정보과학회논문지, 제32권 소프트웨어 및 응용, 제8호, 789 -794쪽, 2005년 8월.
  5. 홍은혜, 고병철, 변혜란, "PCA와 LDA를 이용한 실시간 얼굴 검출 및 검증 기법," 정보과학회논문지:소프트웨어 및 응용 제31권 제2호, 2004년 2월.
  6. 장혜경, 오선문, 강대성, "PCA 기반 LDA 혼합 알고리즘을 이용한 실시간 얼굴인식 시스템 구현," 전자공학회논문지, 제41권 SP편, 제4호, 473-478쪽, 2004년 7월.
  7. R. O. Duda, P. E. Hart, and D. G. Stork, Pattern Classification 2nd ed., Wiley Interscience, New York, 2001.
  8. K. Fukunaga, Introduction to Statistical Pattern Recognition 2nd ed., Academic Press, Boston, 1990.
  9. S. Yeom, B. Javidi, and E. Watson, "Threedimensional distortion-tolerant object recognition using photon-counting integral imaging," Optics Express, Vol. 15, pp. 1513-1533, 2007. https://doi.org/10.1364/OE.15.001513
  10. 염석원, "포톤 카운팅 선형판별법을 이용한 저해상도 얼굴 영상 인식," 대한전자공학회지, 제45권 SP편 제6호, pp. 597-602, 2008.
  11. L. O. Jimenez, A. Morales-Morell, and A. Creus, "Classification of Hyperdimensional Data Based on Feature and Decision Fusion Approaches Using Projection Pursuit, Majority Voting, and Neural Networks," IEEE Trans. on Geoscience and Remote Sensing, Vol. 37, No. 3, pp. 1360-1366, 1999. https://doi.org/10.1109/36.763300
  12. M. T. Sadeghi, M. Samiei, and J. Kittler, "Fusion of PCA-Based and LDA-Based Similarity Measures for Face Verification," EURASIP Journal on Advances in Signal Processing, Vol. 2010.
  13. Y. Pang, N. Yu, R. Zhang, J. Rong, and Z. Liu, "Fusion of SVD and LDA for Face Recognition," 2004 International Conference on Image Processing (ICIP), pp. 1417-1420, 2004.
  14. D. D. Freedman, "Overview of Decision Level Fusion Techniques for Identification and Their Application," Proceedings of the American Control Conference, Baltimore, Maryland. (June 1994).
  15. S. Yeom, "Multi-frame decision level fusion for face classification based on a photon-counting linear discriminant analysis," IS&T/SPIE Electronic Imaging, Vol. 7877, 2011.
  16. S. Yeom, "Photon-counting linear discriminant analysis for face recognition at a distance," International Journal of Fuzzy Logic and Intelligent Systems, Under review.
  17. http://www.cl.cam.ac.uk/research/dtg/attarchive /facedatabase.html.
  18. MATLAB function reference, MathWorks.