적응형 화면 스킵 기반 실시간 비디오의 소스/채널 통합 부호화율 제어

Joint Source/Channel Rate Control based on Adaptive Frame Skip for Real-Time Video Transmission

  • 이명진 (한국항공대학교 항공전자및정보통신공학부)
  • Lee, Myeong-Jin (School of Electronics, Telecommunications and Computer Engineering, Korea Aerospace University)
  • 투고 : 2009.06.29
  • 심사 : 2009.08.30
  • 발행 : 2009.08.31

초록

본 논문에서는 패킷 손실 채널로의 전송을 위한 비디오 부호기의 소스/채널 부호화율 통합 제어 방식을 제안한다. 비디오 전송 시스템의 지연 제약에 따른 소스 부호화율 상한을 구하고, 부호화되거나 스킵된 화면에 대한 소스 왜곡과 패킷 손실에 의한 채널 왜곡을 기반으로 일정 부호화 구간에 대한 평균 왜곡을 정의한다. 주어진 채널률과 패킷 손실률에 대해 비디오 부호화 계수와 FEC 블록 크기를 제어계수로 하는 평균 왜곡 최소화 문제를 정의하고, 실시간 해결 알고리즘을 제안한다. 모의실험에서 제안방식은 40% 이하의 패킷 손실률과 30 프레임 이상의 인트라 매크로블럭 갱신률에서 TMN8에 비해 PSNR과 주관적 화질에서 우수한 성능을 보였다.

In this study, we propose a joint source/channel rate control algorithm for video encoder targeting packet erasure channel. Based on the buffer constraints of video communication systems, encoding rate constraint is presented. After defining source distortion models for coded and skipped video frames and a channel distortion model for packet errors and their propagation, an average distortion model of received video is proposed for a given encoding window. Finally, we define an optimization problem to minimize the average distortion for given channel rates and packet loss rates by controlling spatio-temporal parameters of source video and FEC block sizes. Then, we propose a window-based algorithm to solve the problem in real-time.

키워드

참고문헌

  1. A. Vetro, Y. Wang, and H. Sun, "Estimating distortion of coded and non-coded frames for frameskip-optimized video coding," IEEE ICME, pp. 541-544, 2001.
  2. S. Liu and C.-C. J. Kuo, "Joint temporal-spatial bit allocation for video coding with dependency," IEEE Trans. Circuit Syst. Video Technol., Vol. 15, No. 1, pp. 15-26, 2005. https://doi.org/10.1109/TCSVT.2004.839996
  3. R. C. Reed and J. S. Lim, "Optimal multidimensional bit-rate control for video communication," IEEE Trans. Image Processing. Vol. 15, No. 8, pp. 813-885, 2002.
  4. M. Lee and D. Lee, "Delay constrained spatio-temporal video rate control for lime-varying rate channels," PCM 2006, LNCS 4261, pp. 537-546, Nov. 2006.
  5. S.-H. Gary Cban, et. al., "Video loss recovery with FEC and stream replication," IEEE Trans. Multimedia. Vol. 8, No. 2, pp.370-381, Apr. 2006 https://doi.org/10.1109/TMM.2005.864340
  6. T. Chiang and Y.-Q. Zhang, "A new rate control scheme using quadratic rate distortion model," IEEE Trans. Circuit Syst. Video Technol., Vol. 7, No. 1, pp. 246-250, 1997. https://doi.org/10.1109/76.554439
  7. K. Stuhlmuller, N. Faber, M. Link, and B. Girod, "Analysis of video transmission over lossy channels," IEEE J. Selected Areas in Commun., Vol. 18, No. 6, pp. 1012-1032, 2000. https://doi.org/10.1109/49.848253
  8. M. Lee and J. Kim, "Adaptive video frame rate control over explicit rate networks based on channel rate prediction," lEEE Trans. Communi., Vol. E84-B, No.7, pp.1915-1925, July 2001.
  9. ITU-T Recommendation H.263, Version 2, 1998.
  10. ITU Study Group 16, Video Coding Experts Group, Video Codec Test Model, Near-Term, Version 10 Draft 1, 1998.