DOI QR코드

DOI QR Code

Active Object Tracking System based on Stereo Vision

스테레오 비젼 기반의 능동형 물체 추적 시스템

  • 고정환 (인하공업전문대학 메카트로닉스과)
  • Received : 2016.02.01
  • Accepted : 2016.03.30
  • Published : 2016.04.25

Abstract

In this paper, an active object tracking system basing on the pan/tilt-embedded stereo camera system is suggested and implemented. In the proposed system, once the face area of a target is detected from the input stereo image by using a YCbCr color model and phase-type correlation scheme and then, using this data as well as the geometric information of the tracking system, the distance and 3D information of the target are effectively extracted in real-time. Basing on these extracted data the pan/tilted-embedded stereo camera system is adaptively controlled and as a result, the proposed system can track the target adaptively under the various circumstance of the target. From some experiments using 480 frames of the test input stereo image, it is analyzed that a standard variation between the measured and computed the estimated target's height and an error ratio between the measured and computed 3D coordinate values of the target is also kept to be very low value of 1.03 and 1.18% on average, respectively. From these good experimental results a possibility of implementing a new real-time intelligent stereo target tracking and surveillance system using the proposed scheme is finally suggested.

본 논문에서는 지능적인 보안 시스템 구현의 새로운 접근 방식으로, 인공지능형 시각 시스템에 기반한 팬/틸트 탑재형 스테레오 카메라의 기하학적 정보를 이용한 능동형 물체 추적 시스템을 제안하였다. 제안된 시스템에서는 먼저, 스테레오 카메라에서 입력된 영상으로 부터 YCbCr 컬러 모델과 위상형 상관 기법을 사용하여 표적 얼굴영역의 중심좌표를 검출한 다음, 지능형 시각 시스템에 기반한 팬/틸트 탑재형 스테레오 카메라의 능동적인 제어각도 산출을 통해 표적의 다양한 변화에 관계없이 표적의 3차원 좌표를 실시간적으로 검출하고, 이를 통한 표적 대상의 적응적인 신체 크기 추정을 수행하였다. 각기 다른 신장을 가진 3사람의 다양한 이동경로를 가진 480 프레임의 테스트용 스테레오 영상을 사용한 실험 결과, 표적의 추정된 신체 크기값 역시 계산치 및 측정치 사이의 표준편차가 평균 1.03의 작은 값으로 유지됨은 물론, 제안된 시스템에서 계산된 좌표값과 실제 실험대상으로 참여한 사람의 정확한 실제 위치와의 차이 역시 평균 1.2cm 미만의 오차와 전체적으로 1.18 %의 오차를 보임으로써 이를 통한 새로운 실시간 스테레오 표적 감시추적 시스템의 구현 가능성을 제시하였다.

Keywords

References

  1. P. Danielson, cVideo surveillance for the rest of us: proliferation, privacy, and ethics education", 2002 International Symposium on Technology and Society, vol. 1, no. 1, pp. 162-167, 2002.
  2. James Black and Tim Ellis, "Multi-camera image measurement and correspondence", Measurement, vol. 32, pp. 61-71, 2002. https://doi.org/10.1016/S0263-2241(01)00050-1
  3. Qielu Pan, Jianbo Su, Yugeng Xi, "Uncalibrated 3D robotic visual tracking based on artificial neural network", Acta Automatica Sinica, vol. 27, no. 6, pp. 194-199, 2001.
  4. Younghan Jung, Eunsoo Park, Hakil Kim, and Ukyoul Huh, "Fast Stereo matching based on Plane-converging Belief Propagation using GPU", Journal of the Institute of Electronics Engineers of Korea, vol. 48, no. 2, pp. 88-95, 2011.
  5. Yun-Suk Kang and Yo-Sung Ho, "Depth Generation Method Using Multiple Color and Depth Cameras", Journal of the Institute of Electronics Engineers of Korea, vol. 48, no. 3, pp. 13-18, 2011.
  6. D. Chai and A. Bouzerdoum, "A Bayesian approach to skin color classification in YCbCr color space", IEEE Region Ten Conference(TENCON' 2000), vol.2, no.1, pp.421-424, 2000.
  7. Darrell, G. Gordon, M. Harville, and J. Woodfill, "Integrated person tracking using stereo, color, and pattern detection", IEEE Conference on Computer Vision and Pattern Recognition '98, vol. 1, pp. 601-608, 1998.
  8. J. S. Lee and J. H. Ko, E. S. Kim, "Real-time stereo object tracking system by using block matching algorithm and optical binary phase extraction joint transform correlator", Optics Communication, vol.191, pp.191-202, 2001. https://doi.org/10.1016/S0030-4018(01)01137-3
  9. James Black and Tim Ellis, "Multi-camera image measurement and correspondence", Measurement, vol. 32, pp. 61-71, 2002 https://doi.org/10.1016/S0263-2241(01)00050-1
  10. K. Kanatani, "Constraints on length and angle", Computer Vision Graphics Image Process, vol. 41, pp. 28-42, 1988. https://doi.org/10.1016/0734-189X(88)90115-6
  11. J. H. Ko and E. S. Kim, "Stereoscopic Video Surveillance System for Detection of Target's 3D Location Coordinates and Moving Trajectories", Optics Communications, vol. 191, pp.100-10, 2006.
  12. http://www.redrover.co.kr
  13. http://www.metricanet.com
  14. http://www.svs-vistek.com
  15. http://www.matrox.com