H.264 Encoding Technique of Multi-view Image expressed by Layered Depth Image

계층적 깊이 영상으로 표현된 다시점 영상에 대한 H.264 부호화 기술

  • 김민태 (홍익대학교 대학원 전자전산공학과) ;
  • 지인호 (홍익대학교 컴퓨터정보통신공학과)
  • Received : 2010.01.31
  • Published : 2010.02.28

Abstract

This paper presents H.264 coding schemes for multi-view video using the concept of layered depth image(LDI) representation and efficient compression technique for LDI. After converting those data to the proposed representation, we encode color, depth, and auxiliary data representing the hierarchical structure, respectively, Two kinds of preprocessing approaches are proposed for multiple color and depth components. In order to compress auxiliary data, we have employed a near lossless coding method. Finally, we have reconstructed the original viewpoints successfully from the decoded approach that is useful for dealing with multiple color and depth data simultaneously.

본 논문에서는 계층적 깊이 영상을 H.264 기술로 부호화 시켜 압축된 데이터 크기를 확인하고, 복원된 각 영상의 품질 성능을 알아보았다. 3차원 워핑된 계층적 깊이 영상을 임계값에 따라 조정해 가면서 Filling 보간 실험을 하고 H.264 부호화 시켜 압축된 데이터 크기를 측정하였다. H.264/AVC 기술은 쉽게 비디오와 관련된 콘텐트에 대한 H.264 기술로 확장 될 수 있다. 그래서 깊이 정보를 포함하는 다시점 영상을 효과적으로 압축할 수 있는 계층적 깊이 영상 구조라는 새로운 콘텐트에 적용하는 방법을 제안하였다. 다시점 비디오 영상의 방대한 데이터 양을 감소시키며, 고품질의 영상을 제공하고, 에러 복원 기능이 강화되는 장점도 가지고 있다.

Keywords

References

  1. Joong-Hee Lim, Min-Tae Kim, "Efficient Compression and Authentication Technique of Multi-view Image with Color and Depth Information", IWIT., 2009.
  2. Joong-Hee Lim, "Efficient Compression and Authentication Technique of Multi-view Image with Color and Depth Information by Layered Depth Image Representation", Hong-Ik Univ.., 2008.
  3. J. Shade, S. J. Gortler, L. W. He, and R. Szeliski, "Layered depth images," in Proc. SIGGRAPH'98, Jul. 1998, pp. 231-242.
  4. S. U. Yoon, S. Y. Kim, and Y. S. Ho, "Preprocessing of depth and color information for layered depth image coding," Lecture Notes Comput. Sci. (LNCS), vol. 3333, pp. 622-699, Nov. 2004.
  5. S. U. Yoon, E. K. Lee, S. Y. Kim, Y. S. Ho, K. Yun, S. Cho, and N. Hur, "Inter-camera coding of multiview video using layered depth image representation," Lecture Notes Comput. Sci. (LNCS), vol. 4261, pp. 432-441, 2006.
  6. S. U. Yoon, S. Y. Kim, E. K. Lee, and Y. S. Ho, "A framework for representation and processing of multiview video using the concept of layered depth image," J. VLSI Signal Process. Syst., vol. 46, no. 2-3, pp. 432-441, Mar. 2007.
  7. "Draft ITU-T recommendation and final draft international standard of joint video specification (ITU-T Rec. H.264/ISO/ICE 14496-10 AVC" in Joint Video Team (JVT) of ISO/ICE MPEG and ITU-T VCEG, JVT-G050, 2003.
  8. S. U. Yoon, S. Y. Kim, E. K. Lee, and Y. S. Ho, "A framework for multiview video coding using layered depth images," Lecture Notes Comput. Sci. (LNCS), vol. 3767, pp. 431-442, Nov. 2005.
  9. Seung-Uk Yoon, Student Member, IEEE, and Yo-Sung Ho Senior Member, IEEE, "Multiple Color and Depth Video Coding Using a Hierarchical Representation," Vol.17.11 Nov. 2007, pp. 1450-1460. https://doi.org/10.1109/TCSVT.2007.905363
  10. C. L. Zitnick, S. B. Kang, M. Uyttendaele, S. Winder, and R. Szeliski, "High-quality video view interpolation using a layered representation," ACM Trans. Graph., vol. 23, no. 3, pp. 600-608, Aug. 2004. https://doi.org/10.1145/1015706.1015766
  11. Interactive visual media group at Microsoft Research [Online]. Available: http://research.microsoft.com/vision/InteractiveVisualMediaGroup/3DVideoDo wnload/
  12. Yo-Sung Ho, Seung-Hwan Kim, "H.264/AVC 알고리즘 이해와 프로그램 분석", 두양사, September 30, 2009.