A Content-based Video Rate-control Algorithm Interfaced to Human-eye

인간과 결합한 내용기반 동영상 율제어

  • 황재정 (군산대학교 전자정보공학부 영상통신연구실) ;
  • 진경식 (군산대학교 전자정보공학부 영상통신연구실) ;
  • 황치규 (군산대학교 전자정보공학부 영상통신연구실)
  • Published : 2003.03.01

Abstract

In the general multiple video object coder, more interested objects such as speaker or moving object is consistently coded with higher priority. Since the priority of each object may not be fixed in the whole sequence and be variable on frame basis, it must be adjusted in a frame. In this paper, we analyze the independent rate control algorithm and global algorithm that the QP value is controled by the static parameters, object importance or priority, target PSNR, weighted distortion. The priority among static parameters is analyzed and adjusted into dynamic parameters according to the visual interests or importance obtained by camera interface. Target PSNR and weighted distortion are proportionally derived by using magnitude, motion, and distortion. We apply those parameters for the weighted distortion control and the priority-based control resulting in the efficient bit-rate distribution. As results of this paper, we achieved that fewer bits are allocated for video objects which has less importance and more bits for those which has higher visual importance. The duration of stability in the visual quality is reduced to less than 15 frames of the coded sequence. In the aspect of PSNR, the proposed scheme shows higher quality of more than 2d13 against the conventional schemes. Thus the coding scheme interfaced to human- eye proves an efficient video coder dealing with the multiple number of video objects.

일반적으로 화자와 같이 중요하게 인식되는 객체를 시퀸스 전체에서 높은 우선순위를 부여한다. 그러나 다중 객체 동영상 부호화에서 각 객체의 중요도는 시퀸스 전체에서 일관적이지 않고 프레임마다 변화되므로 시변적으로 중요도를 변화시킬 필요가 있다. 따라서 본 논문에서는 독립적 율제어 알고리즘과 정적 파라미터들인 객체 중요도 또는 우선 순위와 목표 PSNR, 가중치 왜곡에 따라 각 객체에 QP를 할당하는 포괄적 율제어 알고리즘을 설명하고 정적 파라미터 중 우선 순위는 카메라 인터페이스를 통해 인간의 시각적 관심도 또는 중요도에 따라 동적 파라미터로 적용하며 목표 PSNR 및 가중치 왜곡은 객체의 크기, 움직임, 왜곡의 세 변수를 기준으로 비율적으로 나타내어 가중치 왜곡 제어와 우선 순위 기반 제어 알고리즘에 적용하여 비트율 분배의 효율을 높이고 있다. 결과로서 중요도가 적은 객체에 대해서는 매우 적은 비트를 할당받게 하며 시각적 중요도가 높은 객체에 대해서는 많은 비트를 할당받게 한다. 또한 화질이 적정 수준으로 안정되는 안정화 시간도 15 프레임 이내로 줄어드는 효과를 보였다 PSNR의 측면에서도 다른 기법에 비해 평균레벨에서 2㏈ 이상 높아지는 결과를 얻어서 인간과 결합한 내용기반 부호기가 다중객체 통영상 부호기에 효과적으로 사용될 수 있음을 제시하였다.

Keywords

References

  1. IEEE Trans. Circuits Syst. Video Technol. v.7 Rate distortion opimized frame type selection for MPEG encoding J.Lee;B.W.Dickenson
  2. IEEE Trans. Circuits Syst. Video Technol v.7 MPEG coding performance improvement by jointly optimizing mode decision and rate control H.Sun;W.Kwok;M.Chien;C.H.J.Ju
  3. MPEG video group Text of ISO/IEC FDIS 14496-2 Doc. ISO/IEC JTC1/SC29/WG11 N2502
  4. IOS-MPEG MPEG-4 Video Verification Model Version 18 ISO/IEC JTC1/SC29/WG11
  5. 한국통신학회 하계종합학술대회 인간의 시각적 특성을 이용한 다중객체 동영상 부호화 진경식;김충일;황재정
  6. IEEE Trans. Circuits Syst. Video Technol. v.9 Rate Control and Bit Allocation for MPEG-4 J.I Ronda;M.Eckert;F.Jaureguizar;N.Garcia
  7. MoMuSys/WG5-0009 Usage of the multi-object rat control algorithms in the VM Martina Eckert;J. lgnacio Ronda
  8. ISO/IEC JTC1/SC29/WG11 MPEG98/m3757 Bit-rate allocation in multi-object video coding Martina Eckert; J. Ignacio Ronda
  9. IEEE Trans. Inform. Theory v.20 The effects of a fidelity criterion on the encoding of images J.L.Mannos;D.J.Sakrison