Model-based Body Motion Tracking of a Walking Human

모델 기반의 보행자 신체 추적 기법

  • Lee, Woo-Ram (Korea University, Department of Electronics & Computer Engineering) ;
  • Ko, Han-Seok (Korea University, Department of Electronics & Computer Engineering)
  • 이우람 (고려대학교 전자컴퓨터공학과) ;
  • 고한석 (고려대학교 전자컴퓨터공학과)
  • Published : 2007.11.25

Abstract

A model based approach of tracking the limbs of a walking human subject is proposed in this paper. The tracking process begins by building a data base composed of conditional probabilities of motions between the limbs of a walking subject. With a suitable amount of video footage from various human subjects included in the database, a probabilistic model characterizing the relationships between motions of limbs is developed. The motion tracking of a test subject begins with identifying and tracking limbs from the surveillance video image using the edge and silhouette detection methods. When occlusion occurs in any of the limbs being tracked, the approach uses the probabilistic motion model in conjunction with the minimum cost based edge and silhouette tracking model to determine the motion of the limb occluded in the image. The method has shown promising results of tracking occluded limbs in the validation tests.

본 논문은 영상 기반의 사람의 자세 추정에 대하여 다룬다. 특히 사람이 걷는 동안 카메라는 사람의 측면을 관찰하고 있다고 가정한다. 사람의 자세 추정의 문제는 인간-컴퓨터 상호 작용이나 지능형 감시 시스템을 위해 연구가 되는 분야이며, 본 논문에서는 일반적인 보행 상황에서 감시 시스템 또는 위치 추적, 자세 인식에 응용할 수 있는 알고리즘을 제시한다. 이 분야의 최근의 연구동향은 마코프 네트워크를 이용하여 신체 부분들의 위치나 움직임의 관계를 조건부 독립으로 가정하여 다루고 있다. 이러한 방법들의 경우 신체를 십여 개의 부분들로 모델링하고, 연결된 신체들의 관계를 고려하여 자세를 추정한다. 본 논문에서는 이러한 방법을 응용하여 모델을 단순화하고, 더 나아가 손쉽게 사람의 자세를 파악할 수 있는 방법을 제시한다. 이를 위해 신체 부분들이 독립적임을 가정하여 그 위치를 찾은 후에, 모션 캡쳐 데이터로부터 얻은 신체 부분들의 움직임 간의 관계를 고려하여 자세를 수정하여 주었다. 사람의 신체를 찾기 위해 edge matching을 이용하였으며, 그 과정에서 신체 부분의 edge 성분의 방향성을 강조하기 위해 Anisotropic Gaussian Filter를 사용하였다. 신체의 부분이 가려지는 경우, 모델의 silhouette을 이용하여 가려지는 부분에 대해 추가의 matching cost를 부여함으로써 occlusion 시에도 신체의 부분을 찾을 수 있도록 하였다.

Keywords

References

  1. L. Sigal, M. Isard, B.Sigelman, and M. J. Black, 'Attractive People: Assembling Loose-Limbed Models using Non-parametric Belief Propagation,' Advances in Neural Information Processing Systems 16, NIPS 2003
  2. M. W. Lee, and R. Nevatia, 'Dynamic Human Pose Estimation using Markov Chain Monte Carlo Approach,' IEEE Workshop on Motion and Video Computing (WACV/MOTION'05) - Volume 2, pp. 168-175, 2005
  3. G. Hua and Y. Wu, 'Capturing Human Body Motion from Video for Perceptual Interfaces by Sequential Variational MAP,' in Proc. 11th International Conference on Human-Computer Interaction (HCII'05), Las Vegas, Nevada, July 2005
  4. Y. Wu, G. Hua, and T. Yu, 'Tracking Articulated Body by Dynamic Markov Network,' Ninth IEEE International Conference on Computer Vision (ICCV'03) - Volume 2, pp. 1094 - 1101, 2003
  5. L. Sigal, and M. J. Black, 'Measure Locally, Reason Globally: Occlusion-sensitive Articulated Pose Estimation,' in Proc. of IEEE Conf. on Computer Vision and Pattern Recognition, pp. 2041-2048, 2006
  6. M. W. Lee, and I. Cohen, 'A Model-Based Approach for Estimating Human 3D Poses in Static Images,' IEEE Trans. Pattern Analysis and Machine Intelligence, Vol. 28, No. 6, pp. 905 - 916, June 2006 https://doi.org/10.1109/TPAMI.2006.110
  7. P. F. Felzenszwalb, D. P. Huttenlocher, 'Efficient matching of pictorial structures,' In CVPR00, vol. 2, pp. 66 - 73, 2000
  8. S. Ju, M. J. Black, Y. Yacoob, 'Cardboard People: A Parameterized Model of Articulated Image Motion,' International Conference on Automatic Face and Gesture Recognition, pp. 38 - 44, Apr. 1996
  9. B. D. Van Veen, and K. M. Buckley, 'Articulated Body Motion Capture by Stochastic Search,' International Journal of Computer Vision, Vol. 61, Issue. 2, pp. 185-205, Feb. 2005 https://doi.org/10.1023/B:VISI.0000043757.18370.9c
  10. D. Knossow, J. van de Weijer, R. P. Horaud, and R. Ronfard, 'Articulated-body Tracking through Anisotropic Edge Detection,' Workshop on Dynamical Vision, ECCV'06, May, 2006
  11. A. Micilotta, E. Ong, and R. Bowden, 'Real-time Upper Body Detection and 3D Pose Estimation in Monoscopic Images,' in Proc. European Conference on Computer Vision, Number III, pp. 139-150, 2006 https://doi.org/10.1007/11744078_11
  12. E. Sudderth, M. Mandel, W. Freeman, and A. Willsky., 'Distributed Occlusion Reasoning for Tracking with Nonparametric Belief Propagation,' Neural Information Processing Systems, Dec. 2004
  13. G. Borgefors, 'Hierarchical Chamfer Matching: A Parametric Edge Matching Algorithm,' IEEE Transaction on Pattern Analysis and Machine Intelligence, Vol. 10, No. 6, pp. 849 - 865, Apr. 1988 https://doi.org/10.1109/34.9107
  14. J. M.Geusebroek, A.W.M. Smeulders, and J. van de Weijer, 'Fast anisotropic Gauss filtering,' IEEE Transactions on Image Processing, Vol. 12, Issue 8, pp. 4-24, Aug. 2003