다중 영상 기반의 고속 처리용 디블러링 기법

Fast Multiple-Image-Based Deblurring Method

  • 투고 : 2011.11.04
  • 심사 : 2012.05.08
  • 발행 : 2012.07.25

초록

본 논문은 디블러링(Deblurring) 계산 시간을 단축하면서 복원된 영상의 텍스처 및 에지의 선명도를 동시에 강화할 수 있는 다중 영상 기반의 고속 처리용 디블러링 기법을 제안하고자 한다. 먼저 상대적으로 긴 노출 시간에서 촬영된 번짐(Blurring) 결함이 발생한 두 장의 번짐 영상과 짧은 노출에서 촬영된 번짐이 없지만 잡음 성분이 많은 한 장의 잡음 영상을 취득한다. 그리고 처리 속도 개선을 위해 촬영된 다중 입력 영상을 두 배로 다운 샘플링 한 후, 전체 영상에서 추출된 영상 패치 또는 에지 패치에 기반한 점 확산 함수(PSF: Point Spread Function) 추정 기법을 도입해서 점 확산 함수 추정에 소요되는 계산 시간을 효과적으로 단축할 것이다. 입력 영상의 다운 샘플링으로 인해 열하된 미세한 텍스처 성분의 표현 능력을 보완하고 번짐현상이 제거된 복원 영상을 재현하기 위해 텍스처 향상을 위한 디블러링 기법을 개발 및 적용할 것이다. 마지막으로 입력 영상과 동일한 영상 크기로 복구하기 위해 잡음 영상의 선명한 에지 성분을 활용한 업 샘플링 기법을 적용할 것이다. 제안된 방법을 통해 기존의 디지털 카메라 적용에 걸림돌이 되었던 디블러링 처리 속도 시간을 단축할 수 있었고 동시에 텍스처 및 에지의 미세한 성분도 복원할 수 있었다.

This paper presents a fast multiple-image-based deblurring method that decreases the computation loads in the image deblurring, enhancing the sharpness of the textures or edges of the restored images. First, two blurred images with some blurring artifacts and one noisy image including severe noises are consecutively captured under a relatively long and short exposures, respectively. To improve the processing speeds, the captured multiple images are downsampled at the ratio of two, and then a way of estimating the point spread function(PSF) based on the image or edge patches extracted from the whole images, is introduced. The method enables to effectively reduce the computation time taken in the PSF prediction. Next, the texture-enhanced image deblurring method of supplementing the ability of the texture representation degraded by the downsampling of the input images, is developed and then applied. Finally, to get the same image size as the original input images, an upsampling method of utilizing the sharp edges of the captured noisy image is applied. By using the proposed method, the processing times taken in the image deblurring, which is the main obstacle of its application to the digital cameras, can be shortened, while recovering the fine details of the textures or edge components.

키워드

참고문헌

  1. Q. Shan, J. Jia, and A. Agarwala, "High-quality motion deblurring from a single image," ACM Trans. on Graphics, vol. 27, no. 3, 2008.
  2. R. Fergus, B. Singh, A. Hertzmann, S. Roweis, and W. Freeman, "Removing camera shake from a single photograph," ACM trans. on Graphics, vol. 25, no. 3, pp. 787-794, July 2006. https://doi.org/10.1145/1141911.1141956
  3. J. Chen, L. Yuan, C. K. Tang, and L. Quan, "Robust dual motion deblurring," Proc. IEEE Conf. on Computer Vision and Pattern Recognition, Anchorage, AK, pp. 1-8, June 2008.
  4. L. Yuan, J. Sun, L. Quan, and H. Shum, "Image deblurring with blurred/noisy image pairs," ACM Trans. on Graphics, vol. 26, no. 3, 2007.
  5. S. Zhuo, D. Guo, and T. Sim, "Robust flash deblurring," IEEE Conference on Computer Vision and Pattern Recognition, pp. 2440-2447, 2010.
  6. M. Sorel and J. Flusser, "Space-variant restoration of Images degraded by camera motion blur," IEEE Trans. on Image Processing, vol. 17, 2008.
  7. Bergen et al., "Hierarchicial model-based motion estimation", Proceedings of the Second European Conference on Computer Vision, pp. 237-252, 1992.
  8. R. Liu and J. Jia, "Reducing boundary artifacts in image deconvolution," ICIP 2008, pp. 505-508, 2008.
  9. D. Krishnan and R. Fergus, "Fast image deconvolution using Hyper-Laplician priors," Neural Information Processing Systems, 2009.
  10. R. Bergman, H. Nachlieli, and G. Ruckenstein, "Detection of textured areas in images using a disorganization indicator based on component counts," HP Laboratories Israel, March 26, 2007.
  11. C. Chaux et al., "A variational formulation for frame-based inverse problems," Inv. Probl., vol. 23, pp. 1495-1518, 2007. https://doi.org/10.1088/0266-5611/23/4/008
  12. Qi Shan, Zhaorong Li, Jiaya Jia, and Chi-Keung Tang, "Fast image/video upsampling," ACM Trans. on Graphics, vol. 27, no. 5, 2008.
  13. B. D. Choi, S. W. Jung, and S. J. Ko, "Motion-blur-free camera system splitting exposure time," IEEE Transactions on Consumer Electronics, vol. 54, no. 3, pp. 981-986, August 2008. https://doi.org/10.1109/TCE.2008.4637576