DOI QR코드

DOI QR Code

A Background Segmentation and Feature Point Extraction Method of Human Motion Recognition

동작인식을 위한 배경 분할 및 특징점 추출 방법

  • You, Hwi-Jong (Dept. of Computer Engineering, SeoKyeong University) ;
  • Kim, Tae-Young (Dept. of Computer Engineering, SeoKyeong University)
  • 유휘종 (서경대학교 컴퓨터공학과) ;
  • 김태영 (서경대학교 컴퓨터공학과)
  • Received : 2011.01.17
  • Accepted : 2011.03.10
  • Published : 2011.04.20

Abstract

In this paper, we propose a novel background segmentation and feature point extraction method of a human motion for the augmented reality game. First, our method transforms input image from RGB color space to HSV color space, then segments a skin colored area using double threshold of H, S value. And it also segments a moving area using the time difference images and then removes the noise of the area using the Hessian affine region detector. The skin colored area with the moving area is segmented as a human motion. Next, the feature points for the human motion are extracted by calculating the center point for each block in the previously obtained image. The experiments on various input images show that our method is capable of correct background segmentation and feature points extraction 12 frames per second.

본 논문에서는 동작인식 위한 정확한 배경 분할 및 특징점 추출 방법을 제안한다. 배경 분할 과정에서는 먼저, HSV 입력 이미지를 RGB 색상 공간에서 HSV 색상 공간으로 변환한 뒤, H와 S 값에 대한 두 개의 임계치를 사용하여 살색 영역을 분할, 프레임간의 차영상을 이용하여 움직임이 있는 영역을 추출한다. 차영상에서 발생하는 잔상 영역을 제거하기 위하여 헤시안 어파인 영역 검출기를 적용하고, 잡음이 제거된 차 영상과 살색 영역의 이진화 영상을 이용하여 사람의 동작이 나타나는 영역을 분할한다. 특징점 추출 과정은 전체 영상을 블록 단위로 나눠서 각 블록 안에서 분할된 영상에 포함되는 픽셀들의 중점을 구하여 특징점을 추출한다. 실험결과 복잡한 환경에서도 정확한 배경 분할과 사용자 동작을 대표하는 특징점 추출이 약 12 fps로 가능함을 알 수 있었다.

Keywords

References

  1. http://www.eyeofjudgment.com/
  2. 김기영, 이민경, 박영민, 이종원, 우운택, "ARPushPush: 실내 환경 증강 현실 게임," KHCI, pp.354-359, 2005.
  3. Cheok, A.D., Fong, S.W., Goh, K.H., Yang, X., Liu, W., Farzbiz, F., Li, Y., "Human Pacman: Amobile entertainment system with ubiquitous computing and tangible interaction over a wide outdoor area," Mobile HCI 2003, pp. 209 - 224, 2003.
  4. Vezhnevets V, Sazonov V, Andreeva A, "A Survey on Pixel-Based Skin Color Detection Techniques", GraphiCon, 2003.
  5. Fritz, Seifert, Paletta, Bischof, "Entropy based saliency maps for object recognition", ECOVISION, 2004
  6. Takehito OGATA, Joo Kooi TAN, "High-Speed Human Motion Recogniton Based on a Motion History Image and an Eigenspace", IEICE, VOL.E89-D, 2006.
  7. 박상윤, 이응주 "복잡한 영상에 강인한 손동작 인식 방법", 멀티미디어 학회 논문지, 제13권, 제7호, 한국연구재단 등재 학술지, pp. 1000-1015, 2010년 7월.
  8. Cao Xin-yan, Liu Hong-fei, Zou Ying-yong, "Gesture Segmentation Based on Monocular Vision Using Skin Color and Motion Cues", IASP, 2010
  9. Herbert Bay, Andreas Ess, Tinne Tuytelaars, Luc Van Gool "SURF: Speeded Up Robust Features", Computer Vision and Image Understanding (CVIU), Vol. 110, No. 3, pp. 346-359, 2008. https://doi.org/10.1016/j.cviu.2007.09.014