Object-based Stereoscopic Video Coding Using Image Segmentation and Prediction

영역분할 및 예측을 통한 객체기반 스테레오 동영상 부호화

  • 권순규 (경북대학교 전자전기공학부 정회원) ;
  • 배태면 (경북대학교 전자전기공학부 정회원) ;
  • 한규필 (경북대학교 전자전기공학부 정회원) ;
  • 정의윤 (경북대학교 전자전기공학부 정회원) ;
  • 하영호 (경북대학교 전자전기공학부 정회원)
  • Published : 1999.12.01

Abstract

Object-based stereoscopic video coding scheme is presented in this paper. In conventional BMA based stereoscopic video coding for low bit rate transmission, image prediction errors such as block artifacts and mosquito phenomena are occurred. In order to reduce these errors, object based coding scheme is adopted. The proposed scheme consists of preprocessing, object extraction, and object update procedures. The preprocessing procedure extracts non-object regions having low reliability for motion and disparity estimation. This procedure prohibits extracting inaccurate objects. For the better prediction of left channel image, the disparity information is added to the object extraction. And the proposed algorithm can reduce the accumulated error through the object update procedure that detects newly emerging objects, merges objects that have the same object-disparity and object motion, and splits object which has large image prediction error. The experimental results show that the proposed algorithms improve the quality of the prediction without block artifacts and mosquito phenomena.

본 논문에서는 스테레오 동영상의 객체기반 부호화 기법을 제안하였다. 스테레오 영상열의 정보량을 줄이면서 블록화 현상이나 모스키토 현상과 같은 블록정합 기반 방법의 예측오차를 줄이기 위해서는 객체기반 부호화 기법이 필요하다. 객체기반 방법에서는 부호화에 적절한 객체를 추출하기가 어렵고, 추출된 객체에 대해서 프레임이 지남에 따라 갱신해 주어야 하는 문제점이 발생한다. 이를 개선하기 위해서 제안된 방법에서는 전처리, 객체추출, 객체갱신 과정을 사용하였다. 전처리 과정에서는 움직임과 변이 예측의 신뢰성이 낮은 영역을 비객체영역으로 분할하여 부정확한 객체의 추출을 방지하였다. 객체추출 과정에서는 좌영상의 예측을 향상시키기 위해 기존의 움직임과 밝기값을 고려하는 영상분할법에 변이를 추가함으로서 객체기반 부호화에 적합한 객체를 추출하였다. 그리고 객체갱신 과정에서는 새로운 객체의 추출, 객체분할, 객체 병합을 적용하여 누적 오차를 줄였다.

Keywords

References

  1. Signal Processing: Image Communication v.4 A stereoscopic television system (3D-TV) and compatible transmission on MAC channel (3D-MAC) F. Chassaing;B. Chouquet;D. Pele
  2. Signal Processing of HDTV A digital codec for 3D-TV transmission R. Horst
  3. Signal Processing: Image Communication v.11 Stereo image analysis for multi-viewpoint telepresence applications E. M. Izquierdo
  4. Proc. SPIE New auto-stereoscopic display system S. Pastoor;K. Schenke
  5. Proc. SPIE 3D image systems for video communication applications M. R. Jewell;G. R. Chamberlain;D. E. Sheat;P. Cochrane;D. McCartney
  6. IEEE Trans. Circuit and System for Video Technology v.7 Stereo matching for enhanced telepresence in 3D-video communications E. Izquierdo
  7. Critical Reviews Conference on Standards and Common Interfaces for Video Information Systems Compression of stereoscopic video using MPEG-2 A. Puri;R. V. Kollarits;B. G. Haskell
  8. Signal Processing: Image Communication v.6 no.1 Evaluation of multiresolution techniques for motion and disparity estimation D. Tzovaras;M. G. Strinzis;H. Sahinoglou
  9. IEEE Trans. on Circuit and System for Video Technology v.7 no.2 Objected-based coding of stereo image sequences using joint 3-D motion/disparity compensation D. Tzovaras;N. Grammalidis;M. G. Strinzis
  10. Signal Processing: Image Communication v.9 Shape estimation of articulated 3D objects for object-based analysis-synthesis coding(OBASC) G. Martinez
  11. Signal Processing: Image Communication Basic of stereoscopic video, new compression results with MPEG-2 and a proposal for MPEG-4 A. Puri;R. V. Kollarits;B. G. Haskell
  12. 한국통신학회 하계종합 학술발표대회 논문집 다해상도 블록정합 기법을 이용한 스테레오 동영상의 부호화 배태면;한규필;김용석;이호영;하영호
  13. Signal Processing: Image Communication v.9 The use of stereo and motion in a genetic object-based coder S. Panis;M. Ziegler;J. P. Cosmas
  14. International Journal of Computer Vision Occlusions and binocular stereo D. Geriger;B. Landendorf;A. Yuille
  15. Signal Processing: Image Communication v.11 Disparity field and depth map coding for multiview 3D image generation D. Tzovaras;N. Grammlidis;M. G. Strinzis