3D Display Method for Moving Viewers

움직이는 관찰자용 3차원 디스플레이 방법

  • 허경무 (단국대학교 전자공학과) ;
  • 김명신 (단국대학교 전자공학과)
  • Published : 2000.07.01

Abstract

In this paper we suggest a method of detecting the two eyes position of moving viewer by using images obtained through a color CCD camera, and also a method of rendering view-dependent 3D image which consists of depth estimation, image-based 3D object modeling and stereoscopic display process. Through the experiment of applying the suggested methods, we could find the accurate two-eyes position with the success rate of 97.5% within the processing time of 0.39 second using personal computer, and display the view-dependent 3D image using Fl6 flight model. And through the similarity measurement of stereo image rendered at z-buffer by Open Inventor and captured by stereo camera using robot, we could find that view-dependent 3D picture obtained by our proposed method is optimal to viewer.

본 논문에서는 관찰자의 위치가 변하더라도 이를 실시간 추적하여 관찰자의 시점에 정확히 대응하는 입체영상을 구현할 수 있는 방법을 제안하였다. 즉 고성능의 하드웨어 장비가 아닌, 일반적으로 사용되는 개인용 컴퓨터에서도 인간의 두 눈을 찾아내고 관찰자의 움직임을 추적할 수 있도록 하는 알고리즘을 제안하였으며, 또한 관찰자의 위치에 따라 달라지는 물체의 모습을 표현해 주기 위해 유한한 다수의 입력 영상 정보를 이용하여 입체 영상을 제작하고 관찰자의 위치 이동에 정확히 대응하는 영상을 디스플레이하는 방법을 제안하였다. 본 논문에서 제안한 방법을 통해 평균 0.39초의 짧은 시간내에 약 97.5%까지 정확히 두 눈의 위치를 찾을 수 있었으며, Fl6 모델을 사용하여 여러 관찰자의 시점에 대응하는 3차원 디스플레이 실험 결과를 보임으로써 본 방법의 우수함을 보였다. 그리고 실제 로봇을 이용하여 좌우 카메라로 얻은 좌우 영상과 인벤터를 통해 버퍼에서 렌더링되는 스테레오 영상과의 유사도를 측정하여, 관찰자의 시점에 대응하여 렌더링되는 3차원 영상이 최적의 시점 대응 영상임을 확인하였다.

Keywords

References

  1. Hiroshi Imai, Masao Imai, Yukio Ogura, 'Eye-Position Tracking Stereoscopic Projector Using Image Shifting Optics,' Proceedings of the Third International Display Workshops (IDW), pp.449-452, Kobe, Japan, Nov., 1996
  2. Ho-Sub Yoon, Jung Soh, Min Wang, and Byung-Woo Min, 'Human Eye Detection in a Complex Background,' The Fourth International Conference on Control, Automation, Robotics and Vision(ICARCV'96), Vol. 1, pp. 380-384, Singapore, Dec., 1996
  3. Taro Yokoyama, Haiyuan Wu and Masahiko Yachida, 'Automatic Detection of Facial Feature Points and Contours,' Proceedings of 5th IEEE International Workshop on Robot and Human Communication, pp.335-340, Tsukuba, Nov., 1996 https://doi.org/10.1109/ROMAN.1996.568859
  4. Haiyuan Wu, Takeshi Fukumoto, Qian Chen, and Mashhiko Yachida, 'Face Detection and Rotations Estimation using Color Information,' Proceedings of 5th IEEE International Workshop on Robot and Human Communication, pp. 341-346, Tsukuba, Nov., 1996 https://doi.org/10.1109/ROMAN.1996.568860
  5. J. Weng, T. S. Huang, and N. Ahuja. Motion and Structure from Image Sequences, Springer-Verlag, Berlin, 1993
  6. Tomohiko Hattori, 'Streographic Image Taking and Output Devices Compatible with Conventional Infrastructure,' Proc. of International Workshop on 3D Imaging Media Technology, pp. 43 -150, March 1996
  7. C. Fermuller and Y. Aloimonos, 'The Role of Fixations in Visual Motion Analysis,' Int'l J. Computer Vision, 11:2, pp. 165-186, 1993 https://doi.org/10.1007/BF01469227
  8. M. J. Swain and M. A. Stricker, 'Promising Directions in Active Vision,' Int'l J. Computer Vision, 11:2, pp. 109-126, 1993 https://doi.org/10.1007/BF01469224
  9. 박남준, '임의 시점 영상 합성을 위한 다해상도 다기선 스테레오 정합 기법,' 연세대학교 석사학위 논문, 1997