Road Image Enhancement Method for Vision-based Intelligent Vehicle

비전기반 지능형 자동차를 위한 도로 주행 영상 개선 방법

  • 김승규 (연세대학교 컴퓨터과학과) ;
  • 박대용 (연세대학교 컴퓨터과학과) ;
  • 최영우 (숙명여자대학교 컴퓨터과학과)
  • Received : 2014.03.21
  • Accepted : 2014.03.26
  • Published : 2014.03.30

Abstract

This paper presents an image enhancement method in real road traffic scenes. The images captured by the camera on the car cannot keep the color constancy as illumination or weather changes. In the real environment, these problems are more worse at back light conditions and at night that make more difficult to the applications of the vision-based intelligent vehicles. Using the existing image enhancement methods without considering the position and intensity of the light source and their geometric relations the image quality can even be deteriorated. Thus, this paper presents a fast and effective method for image enhancement resembling human cognitive system which consists of 1) image preprocessing, 2) color-contrast evaluation, 3) alpha blending of over/under estimated image and preprocessed image. An input image is first preprocessed by gamma correction, and then enhanced by an Automatic Color Enhancement(ACE) method. Finally, the preprocessed image and the ACE image are blended to improve image visibility. The proposed method shows drastically enhanced results visually, and improves the performance in traffic sign detection of the vision based intelligent vehicle applications.

본 논문에서는 도로 주행에서 취득한 영상을 개선하는 방법을 제안한다. 일반적인 도로주행 영상은 다양한 조명 환경과 날씨 상태로 인하여 선명하지 못한 영상이 취득되기도 한다. 특히 역광이나 야간에는 품질이 좋은 선명한 영상을 얻기가 더욱 어려우며, 이는 비전기반 지능형 자동차 기술의 응용에 많은 어려움을 준다. 인간의 시각 인지방법은 여러 가지조명 조건을 고려하여 색을 지각한다. 하지만 기존의 영상 개선 방법들은 광원의 위치와 광도, 기하학적 관계를 고려하지 않기 때문에 완벽한 결과를 얻기가 어려우며, 오히려 영상의 질이 떨어지는 경우도 발생한다. 본 논문에서는 이러한 문제점을 해결하기 위해서 1) 주어진 입력 영상의 전처리 과정을 수행한 후, 2) 선명도를 추정하여 색채의 대비를 평가하고, 3) 과대 및 과소평가 결과를 전처리된 영상과 혼합하여 사람이 지각하는 색상과 같이 개선된 영상을 얻는 효과적인 방법을 제안한다. 본 논문에서 제안하는 방법은 시각적으로 개선된 결과를 보여줄 뿐만 아니라 비전기반 지능형 자동차 기술의 한 응용분야인 교통표지판 검출의 전처리 과정으로 적용되어 성능이 향상됨을 확인할 수 있었다.

Keywords

References

  1. 김승규, 임광용, 최영우, 변혜란, "색상과 모양 특징을 이용한 실시간 교통 표지판 검출", 한국정보과학회 2012 가을 학술발표논문집, 39(2)(B), pp.198-200, 2012.
  2. A. Broggi, P, Cerri, P. Medici, P. P. Porta, and G. Ghisio, "Real Time Road Signs Recognition", in Proceedings of the IEEE Symposium on Intelligent Vehicles, 2007, pp. 981-986.
  3. C. keller, C. Sprunk, C. Bahlmann, J. Giebel, and G. baratoff, "Real-time recognition of u.s. speed sign", in Proceedings of the IEEE Symposium on Intelligent Vehicles, 2008, pp.518-523.
  4. E. Land and McCann, J, "Lightness and Retinex theory", Journal of the Optical Society of America, vol.61, no.1, pp.1-11, 1971. https://doi.org/10.1364/JOSA.61.000001
  5. E. Land, "An alternative technique for the computation of the designator in the Retinex theory of color vision", Proceedings of the National Academy Science of the United State of America, sci. 83, pp.3078-3080, 1986. https://doi.org/10.1073/pnas.83.10.3078
  6. R. Ramamoorthi and P. Hanrahan, "A signal-processing framework for inverse rendering", ACM SIGGRAPH 2001, pp.117-128.
  7. D. Jobson, Z. Rahman, and G. Woodell, "Properties and performance of a center/surround Retinex", IEEE Transactions on Image Processing, vol. 6, no. 3, pp. 451-462, 1997. https://doi.org/10.1109/83.557356
  8. D. Jobson, Z. Rahman, and G. Woodell, "A multiscale Retinex for bridging the gap between color images and the human observation of scenes. IEEE Transactions on Image Processing, vol. 6, no. 7, pp.965-976, 1997. https://doi.org/10.1109/83.597272
  9. D. Fattal, Lischinski, and M. Werman, "Gradient Domain High Dynamic Range Compression", ACM Transactions on Graphics, vol. 21 no. 3, pp.249-256, 2002.
  10. C. Gatta, A. Rizzi, D. Marini, "ACE: An automatic color equalization algorithm", Proceedings of the First European Conference on Color in Graphics Image and Vision, 2002.
  11. M. Bertalmio, V. Caselles, E. Provenzi and A. Rizzi, "Perceptual Color Correction Through Variational Techniques," IEEE Transactions on Image Processing, vol. 16, no. 4, pp.1058-1072, 2007. https://doi.org/10.1109/TIP.2007.891777
  12. H. K. Hartline, H. G. Wagner, F. Ratcliff, "Inhibition in the eye of limulus", Journal of General Physiology, vol. 39, no. 5, pp.651-673, 1956. https://doi.org/10.1085/jgp.39.5.651
  13. D. Guo, Y. Cheng, S. Zhuo, and T. Sim, "Correcting Over-Exposure in Photographs", IEEE International Conference on Computer Vision and Pattern Recognition, pp. 515-521, 2010.
  14. R. Belaroussi, P. Foucher, J. -P. Tarel, "Road Sign Detection in Images: A Case Study", International Conference on Pattern Recognition, pp.484-488, 2010.
  15. S. Houben, J. Stalkamp, J. Salmen, M. Schlipsing, and C. Igel, "Detection of Traffic Signs in Real-World Images: The German Traffic Sign Detection Benchmark", IEEE International Joint Conference on Neural Networks, 2013
  16. N. Barnes, A. Zelinsky, and L. Fletcher, "Real-time speed sign detection using the radial symmetry detector", IEEE Transactions on Intelligent Transportation Systems, vol. 9, no. 2, pp.322-332, 2008. https://doi.org/10.1109/TITS.2008.922935
  17. S. Houben, "A single target voting scheme for traffic sign detection", IEEE Symposium on Intelligent Vehicles, 2011, pp.124-129.