DOI QR코드

DOI QR Code

Belief propagation stereo matching technique using 2D laser range finder

2차원 레이저 거리측정기를 활용한 신뢰도 전파 스테레오 정합 기법

  • 김진형 (충남대학교 메카트로닉스공학과) ;
  • 고윤호 (충남대학교 메카트로닉스공학과)
  • Received : 2013.11.06
  • Accepted : 2014.01.06
  • Published : 2014.02.28

Abstract

Stereo camera is drawing attention as an essential sensor for future intelligence robot system since it has the advantage of acquiring not only distance but also other additive information for an object. However, it cannot match correlated point on target image for low textured region or periodic patterned region such as wall of building or room. In this paper, we propose a stereo matching technique that increase the matching performance by fusing belief propagation stereo matching algorithm and local distance measurements of 2D-laser range finder in order to overcome this kind of limitation. The proposed technique adds laser measurements by referring quad-tree based segment information on to the local-evidence of belief propagation stereo matching algorithm, and calculates compatibility function by reflecting over-segmented information. Experimental results of the proposed method using simulation and real test images show that the distance information for some low textured region can be acquired and the discontinuity of depth information is preserved by using segmentation information.

스테레오 카메라는 거리정보의 획득 이외에 대상의 부가적인 정보를 획득할 수 있는 장점이 있어 향후 지능 로봇 시스템에 필수적인 센서로 각광받고 있다. 하지만 건물의 벽면과 같이 대상 표면에 반복적인 무늬가 있는 영역, 질감도가 낮은 영역 등에서는 기존의 기법으로는 정합이 불가능하다. 이러한 한계를 극복하기 위해 본 논문에서는 2D 레이저 거리 측정기를 활용해 국소적으로 획득된 거리정보를 신뢰도 전파스테레오 정합 기법에 융합하여 정합 성능을 향상시키는 기법을 제안한다. 제안된 기법은 기존의 신뢰도 전파 스테레오 정합 기법의 국부-명백함수에 Quad-tree 기반 영상분할 정보를 참조하여 레이저 측정 정보를 추가하고, 영상의 과분할 정보를 참조하여 국부-적합성 함수를 계산한다. 제안한 기법을 모의 실험영상과 실영상에 적용한 결과 질감도가 낮은 영역에서도 부분적으로 거리정보를 획득할 수 있었으며, 영역분할 정보의 사용으로 깊이 정보의 불연속성이 유지되는 것을 관찰할 수 있었다.

Keywords

References

  1. 김곤우, 이상무, "지능형 로봇을 위한 디지털 융합기술," 전자공학회지, 제35권, 제2호, pp. 30-39, 2008.
  2. 정연구, 이재연, 소정, 김계경, 조영조, "[특집]지능형 로봇의 시각인식기술과 활용," 전자공학회지, 제32권, 제1호, pp. 70-80, 2005.
  3. 고정환, "지능형 로봇제어를 위한 3D 비전 기술동향," 전자공학회지, 제38권, 제12호, pp. 72-78, 2011.
  4. J. Han, L. Shao, D. Xu, and J. Shotton, "Enhanced Computer Vision with Microsoft Kinect Sensor: A Review," IEEE Trans. on Cybernetics, Vol. 43, No. 99, pp. 1-17, 2013. https://doi.org/10.1109/TCYB.2013.2267631
  5. 김대성, 편무욱, 문수정, 조용원, "ToF 카메라의 특성 및 활용 가능성에 관한 연구," 한국지형공간정보학회 춘계학술대회, pp. 197-198, 2012.
  6. 강윤석, 호요성, "다시점 카메라와 깊이 카메라를 이용한 고화질 깊이 맵 제작 기술," 대한전자공학회논문지, 제48권, 제6호, pp. 1-7, 2011.
  7. 최우영, 박래홍, "Stereo Vision 및 응용," 전자공학회지, 제21권, 제10호, pp. 1010-1020, 1994.
  8. 김진형, 고윤호, "다중 베이스라인 기반 질감 적응적 신뢰도 전파 스테레오 정합 기법," 전자공학회논문지, 제50권, 제1호, pp. 75-85, 2013. https://doi.org/10.5573/ieek.2013.50.1.075
  9. 한희일, 류대현, "에너지 기반 스테레오 매칭에서의 정합 파라미터 추정에 관한 연구," 멀티미디어학회논문지, 제14권, 제2호, pp. 288-294, 2011. https://doi.org/10.9717/kmms.2011.14.2.288
  10. J. Sun, N.N. Zheng, and H.Y. Shum, "Stereo Matching using Belief Propagation," IEEE Trans. on Pattern Analysis and Machine Intelligence, Vol. 25, No. 7, pp. 787-800, 2003. https://doi.org/10.1109/TPAMI.2003.1206509
  11. L. Yao, D. Li, J. Zhang, L. Wang, and M. Zhang, "Accurate Real-Time Stereo Correspondence using Intra- and Inter-scanline Optimization," Journal of Zhejiang University SCIENCE C, Vol. 13, No. 6, pp. 472-482, 2012. https://doi.org/10.1631/jzus.C1100311
  12. W.C. Chiu, U. Blanke, and M. Fritz, "Improving the Kinect by Cross-Modal Stereo," Proc. BMVC, pp. 116.1-116.10, 2011.
  13. G. Li, Y. Liu, L. Dong, X. Cai, and D. Zhou, "An Algorithm for Extrinsic Parameters Calibration of a Camera and a Laser Range Finder using Line Features," Proc. IEEE/RSJ Int. Conf. IROS, pp. 3854-3859, 2007.
  14. 김종덕, 권기구, 이수인, "라이다 센서 기술 동향 및 응용," [ETRI]전자통신동향분석, 제27권, 제6호, pp. 134-143, 2012.
  15. 김태원, 김진형, 김성수, 고윤호, "Heave 추정 기반의 레이저 거리측정기를 이용한 선행지형예측시스템," 전자공학회논문지, 제49권 SC편, 제1호, pp. 64-73, 2012.
  16. M. Spann and R. Wilson, "A Quad-Tree Approach to Image Segmentation which Combines Statistical and Spatial Information," Pattern Recognition, Vol. 18, No. 3, pp. 257-269, 1985 https://doi.org/10.1016/0031-3203(85)90051-2
  17. D. Scharstein and R. Szeliski, "A Texonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms," International Journal of Computer Vision, Vol. 47, No. 1-3, pp. 7-42, 2002. https://doi.org/10.1023/A:1014573219977