DOI QR코드

DOI QR Code

Saptio-temporal Deinterlacing Based on Edge Direction and Spatio-temporal Brightness Variations

에지 방향성과 시공간 밝기 변화율을 고려한 시공간 De-Interlacing

  • Jung, Jee-Hoon (Division of electronic computer Engineering, Chonnam National Univ.) ;
  • Hong, Sung-Hoon (School of Electronics & Computer Engineering, Chonnam National Univ. (Information & Telecommunication Research Institute))
  • 정지훈 (전남대학교 전자컴퓨터공학과) ;
  • 홍성훈 (전남대학교 전자컴퓨터공학부 (정보통신연구소))
  • Received : 2011.08.08
  • Accepted : 2011.09.04
  • Published : 2011.09.30

Abstract

In this paper, we propose an efficient deinterlacing algorithm which interpolates the missing scan lines by weighted summing of the intra and the inter interpolation pixels according to the spatio-temporal variation. In the spatial interpolation, we adopt a new edge based spatial interpolation method which includes edge directional refinement. The conventional edge dependent interpolation algorithms are very sensitive to noise due to the failure of estimating edge direction. In order to exactly detect edge direction, our method first finds the edge directions around the pixel to be interpolated and then refines edge direction of the pixel using weighted maximun frequent filter. Futhermore, we improve the accuracy of motion detection by reducing the possibility of motion detection error using 3 tab median filter. In the final interpolation step, we adopt weighted sum of intra and inter interpolation pixels according to spatio-temporal variation ratio, thereby improving the quality in slow moving area. Simulation results show the efficacy of the proposed method with significant improvement over the previous methods in terms of the objective PSNR quality as well as the subjective image quality.

본 논문에서는 시공간 밝기 변화량에 따라 공간적 보간과 시간적 보간 결과를 가중합하여 주사선을 보간하는 효율적인 디인터레이싱 알고리즘을 제안한다. 공간적 보간에서는 에지 방향성 보정 기능을 포함한 새로운 에지기반 공간적 보간 기법을 적용한다. 일반적으로 기존의 에지를 고려한 공간적 디인터레이싱 알고리즘은 에지의 방향을 잘못 추정할 경우 보간된 영상에서 심각한 화질저하가 발생한다. 이를 보완하고 정확한 에지의 방향을 찾아내기 위해 밝기 차만을 이용한 기존 방법들과는 달리 제안된 방법은 에지 방향성을 검출하고 그 정보에 따라 가중최대빈도수 필터를 이용하여 보간될 화소의 에지의 방향성을 보정한다. 또한, 시간적 변화량 검출 오류를 줄이기 위해 미디언 필터를 적용하여 움직임 검출 성능을 향상시키고, 최종 화소 보간과정에서 시공간적인 밝기 변화량에 따라 공간적 보간과 시간적 보간 결과값의 가중합을 사용하여 움직임이 적은 영역에서의 화질을 향상시킨다. 실험결과 제안된 방법은 기존의 디인터레이싱 방법들에 비하여 주관적 화질뿐만 아니라 객관적인 성능도 우수함을 알 수 있다.

Keywords

References

  1. Li Renxiang, Zheng Bing, and M. L. Liou, "Reliable motion detection/compensation for interlaced sequences and its applicationsto deinterlacing," IEEE Trans. Circuits and Systems for VideoTechnology, vol.10, No. 1, pp. 23-29, Feb. 2000. https://doi.org/10.1109/76.825854
  2. N.Seth-Smith and G. Walker, "Flexible up-conversion for highquality TV and multimedia displays," in Proc. of the ICCE, pp. 338-339, June 1996.
  3. M. Park, M. Kang, K. Nam, and S. Oh, "New edge dependent deinterlacing algorithm based on horizontal edge pattern" IEEE Trans. on Consumer Electronics, Vol. 49, No. 4, pp. 1508-1512, November. 2003. https://doi.org/10.1109/TCE.2003.1261260
  4. H. S. Oh, Y. Kim, Y. Y. Jung, A. W. Morales, and S. J. Ko, "Spatio-temporal edge based median filtering for deinterlacing," in Digest of the Int. Conference on Consumer Electronics, pp. 52-53, Jun. 2000.
  5. Hoon Yoo and Jechang Jeong, "Direction-oriented interpolation and its application to de-interlacing," IEEE Trans.Consumer Electronics, vol. 48, Issue 4, pp.954-962, November. 2003. https://doi.org/10.1109/TCE.2003.1196426
  6. T. Doyle, "Interlaced to sequential conversion for EDTV applications," Proceedings 2nd Int. Workshop Signal Processing HDTV, pp. 412-430, February. 1998.
  7. T. Chen, H.R. Wu and Z. Yu, "Efficient edge line average interpolation algorithm for de-interlacing," Proceedings of SPIE, Visual Communications and Image Processing 2000, vol. 4067, pp.1551 -1558, Perth, Australia, Jun. 2000.
  8. Phu, M.Q.; Tischer, P.E.; Wu, H.R, "A median based interpolation algorithm for deinterlacing," ISPACS 2004. Proceedings of 2004 International Symposium on, pp. 390 - 397, November. 2004.
  9. 장승민, 홍성훈"가중 중앙값 필터를 이용한 에지방향성 보정 기반 디인터 레이싱 기법", 대한 전자공학회 논문지 Vol. 46, No, 4, pp 89 - 96, November. 2009.
  10. B. Bhatt, F. Templin and A. Cavallerano, "Grand Alliance HDTV multiformatscan converter," IEEE Trans. Consumer Electronics, vol. 4, no.4, pp. 1020-1031, November. 1995. https://doi.org/10.1109/30.477220
  11. Lejun Yum Jintao Li, "Motion Adaptive Deinterlacing with Accurate Motion Detection and Anti-aliasing Interpolation Filter," Consumer Electronics, IEEE Transactions on, Vol. 52, No. 2, pp. 712 - 717 , August 2006. https://doi.org/10.1109/TCE.2006.1649702