The Journal of Korean Institute of Communications and Information Sciences (한국통신학회논문지)

The Korean Institute of Commucations and Information Sciences (한국통신학회)
권호 표지

Real-time Multiple Stereo Image Synthesis using Depth Information

깊이 정보를 이용한 실시간 다시점 스테레오 영상 합성

  • 장세훈 (광운대학교 전자공학과 디지털 미디어 연구실) ;
  • 한충신 (광운대학교 전자공학과 디지털 미디어 연구실) ;
  • 배진우 (광운대학교 전자공학과 디지털 미디어 연구실) ;
  • 유지상 (광운대학교 전자공학과 디지털 미디어 연구실)
  • Published : 2005.04.01
Download PDF
⟨ Previous Next ⟩

Abstract

In this paper. we generate a virtual right image corresponding to the input left image by using given RGB texture data and 8 bit gray scale depth data. We first transform the depth data to disparity data and then produce the virtual right image with this disparity. We also proposed a stereo image synthesis algorithm which is adaptable to a viewer's position and an real-time processing algorithm with a fast LUT(look up table) method. Finally, we could synthesize a total of eleven stereo images with different view points for SD quality of a texture image with 8 bit depth information in a real time.

본 논문에서는 영상의 RGB 정보와 화소단위의 8비트 깊이 정보를 이용하여 현재의 영상과 스테레오 쌍이 되는 가상의 우 영상을 생성한다. 이 과정에서 깊이 정보를 시차 정보로 변환하고, 생성된 시차정보를 이용하여 우 영상을 생성하게 된다. 또한 스테레오 영상을 합성한 후 회전(rotation)과 이동(translation) 등의 기하학적 변환을 이용하여 관찰자의 위치를 고려한 다시점 스테레오 영상을 합성하는 기법을 제안하고, 깊이 정보와 시차 정보와의 관계를 분석하여 화소 단위의 실시간 처리를 위한 LUT(look-up table) 방식의 고속 기법도 제안한다. 실험 결과 SD급 영상의 경우 8비트 깊이 정보만을 가지고 11시점의 스테레오 영상을 실시간으로 합성할 수 있다.

Keywords

References

  1. A. Redert, E. Jendriks, J. Biemond '3-D scene reconstruction with viewpoint adaptation on stereo displays', IEEE Trans. Circuits and systems for video tech., vol.10, pp.550-562, 2000 https://doi.org/10.1109/76.845000
  2. Purl, R.V. Kollarits, B.G. Haskell, 'Basics of stereoscopic video, new compression results with MPEG-2 and a proposal for MPEG-4', signal processing: Image comm., vol.10, pp.201-234, 1997 https://doi.org/10.1016/S0923-5965(97)00025-8
  3. Veksler, O.'Semi-dense stereo correspondence with dense features', Stereo and Multi-Baseline Vision, 2001. (SMBV 2001). Proceedings. IEEE Workshop on , 9-10 Dec. 2001 Pages:149 - 157 https://doi.org/10.1109/SMBV.2001.988773
  4. A. Redert, et al. 'ATTEST : Advanced Three-Dimensional Television System Technologies', 3D Data Processing Visualization and Transmission, 2002. First International Symposium, pp.313-319, Jun, 2002 https://doi.org/10.1109/TDPVT.2002.1024077
  5. ATTEST : Advanced Three-Dimensional Television System Technologies, http://eigg.res.cse.dmu.ac.uk/attest/2002-2004
  6. C. Fehn, 'Depth-Image-Based Rendering (DIBR), Compression and Transmission for a New Approach on 3D-TV', In Proceedings of SPIE Stereoscopic Displays and Virtual Reality Systems XI, pages 93-104, San Jose, CA, USA, January 2004
  7. Yao Wang, Jorn Ostermann, Ya-Qin Zhang, 'Video processing and communications', Prentice Hall, 2002, p.374-383