Implementation of Intelligent Moving Target Tracking and Surveillance System Using Pan/Tilt-embedded Stereo Camera System

팬/틸트 탑제형 스테레오 카메라를 이용한 지능형 이동표적 추적 및 감시 시스템의 구현

  • 고정환 (광운대학교 전자공학과 국가지정 3차원 영상미디어 연구실) ;
  • 이준호 (광운대학교 전자공학과 국가지정 3차원 영상미디어 연구) ;
  • 김은수 (광운대학교 전자공학과 국가지정 3차원 영상미디어 연구실)
  • Published : 2004.04.01

Abstract

In this paper, a new intelligent moving target tracking and surveillance system basing on the pan/tilt-embedded stereo camera system is suggested and implemented. In the proposed system, once the face area of a target is detected from the input stereo image by using a YCbCr color model and then, using this data as well as the geometric information of the tracking system, the distance and 3D information of the target are effectively extracted in real-time. Basing on these extracted data the pan/tilted-embedded stereo camera system is adaptively controlled and as a result, the proposed system can track the target adaptively under the various circumstance of the target. From some experiments using 80 frames of the test input stereo image, it is analyzed that standard deviation of the position displacement of the target in the horizontal and vertical directions after tracking is kept to be very low value of 1.82, 1.11, and error ratio between the measured and computed 3D coordinate values of the target is also kept to be very low value of 0.5% on average. From these good experimental results a possibility of implementing a new real-time intelligent stereo target tracking and surveillance system using the proposed scheme is finally suggested.

본 논문에서는 팬/틸트가 탑재된 스테레오 카메라를 이용한 새로운 지능형 이동표적 추적감시 시스템을 제안하고 구현하였다. 제안된 시스템은 먼저, 스테레오 카메라에서 입력된 영상으로부터 YCbCr 칼라 임계치 기법을 사용하여 표적 얼굴영역을 검출한 다음, 지능형 시각 시스템에 기반한 팬/틸트 탑재형 스테레오 카메라의 능동적인 제어를 통해 표적의 다양한 변화에 관계없이 표적의 거리정보 및 3차원적 이동 정보를 실시간적으로 검출함으로써 표적의 적응적 추적감시를 수행하게 된다. 80 프레임의 스테레오 영상을 사용한 실험 결과, 이동표적에 대한 실시간적 위치정보 검출 및 적응적 추적을 확인하였으며 특히, 팬/틸트 추적후 표적 중심좌표의 수평, 수직 표준편차가 매우 작은 값인 1.82, 1.11로 각각 유지되고, 표적의 3차원적 위치 좌표값의 오차 역시 평균 0.5% 이하로 유지됨이 분석됨으로써 이를 통한 새로운 실시간 스테레오 표적 감시추적 시스템의 구현 가능성을 제시하였다.

Keywords

References

  1. 2002 International Symposium on Technology and Society, 2002(ISTAS' 02) v.1 no.1 Video surveillance for the rest of us: proliferation, privacy, and ethics education P.Danielson
  2. Measurement v.32 Multi-camera image measurement and correspondence James Black;Tim Ellis https://doi.org/10.1016/S0263-2241(01)00050-1
  3. Optics Communication v.191 Real-time stereo object tracking system by using block matching algorithm and optical binary phase extraction joint transform correlator J.S.Lee;J.H.Ko;E.S.Kim https://doi.org/10.1016/S0030-4018(01)01137-3
  4. Optics Communications v.200 Implementation of opto-digital stereo object tracking system J.S.Lee;C.W.Seo;E.S.Kim https://doi.org/10.1016/S0030-4018(01)01572-3
  5. IEEE Region Ten Conference(TENCON'2000) v.2 no.1 A Bayesian approach to skin color lassification in YCbCr color space D.Chai;A.Bouzerdoum
  6. IEEE Trans. on Circuits and Systems for Video Technology v.9 no.4 Face segmentation using skin-color map in videophone applications Douglas Chai https://doi.org/10.1109/76.767122
  7. 1999' IEEE Computer Society Conference on Computer Vision and Pattern Recognition v.2 Detecting and tracking moving objects for video surveillance Cohen,I.;Medioni;C.
  8. IEEE Transactions on Aerospace and Electronic Systems v.29 no.3 Multiple hypothesis track confirma tion for infrared surveillance systems S.S.Blackman;R.J.Dempster;T.J.Broida https://doi.org/10.1109/7.220932
  9. IEEE Conference on Computer Vision and Pattern Recognition v.1 no.1 Integrated person tracking using stereo, color, and pattern detection T.Darrell;G.Gordon;M.Harville;J.Woodfill
  10. Optical Engineering v.36 no.2 Three-dimensional camera motion estimation and foreground/background sepa ration for stereoscopic image sequences D.Tzovaras;N.Grmmaiidis;M.G.Strintzis https://doi.org/10.1117/1.601229
  11. Proc. of 2002 FIRA Robor World Congress v.1 no.1 Opto-digital imple mentation of pan/tilt-controlled stereo object tracking system J.H.Ko;E.S.Kim
  12. Acta Automatica Sinica v.27 no.6 Uncalibrated 3D robotic visual tracking based on artificial neural network Qielu Pan;Jianbo Su;Yugeng Xi
  13. Multiple view geometry R.Hartley;A.Zisserman