Design and Implementation of Video Clip Service System in Augmented Reality Using the SURF Algorithm

SURF 알고리즘을 이용한 증강현실 동영상 서비스 시스템의 설계 및 구현

  • Received : 2014.12.25
  • Accepted : 2015.02.02
  • Published : 2015.01.30

Abstract

In this paper, a service system which shows linked video clips from the static images extracted from newspapers, magazines, photo albums and etc in an augmented reality. First, the system uses SURF algorithm to extract features from the original photos printed in the media and stores them with the linked video clips. Next, when a photo is taken by using a camera from mobile devices such as smart phones, the system extracts features in real time, search a linked video clip matching the original image, and shows it on the smart phone in an augmented reality. The proposed system is applied to Android smart phone devices and the test results verify that the proposed system operates not only on normal photos but also on partially damaged photos.

본 논문은 신문, 잡지, 앨범 등에서 추출한 정적인 영상으로부터 이와 연계된 동영상을 증강현실로 보여주는 서비스를 제공하는 시스템을 설계하고 구현하였다. 먼저, 매체에 인쇄되어 있는 원본 영상에 대하여 SURF 알고리즘을 이용하여 특징점을 추출하여 관련 동영상과 함께 저장한다. 다음으로 스마트폰 등의 모바일 기기의 카메라를 이용하여 이미지를 촬영하면, 이의 특징점을 실시간으로 추출하여 이와 매칭되는 원본 영상을 검색하여 연결된 동영상을 불러와서 스마트폰을 통해 증강현실로 보여준다. 제안 시스템은 안드로이드 스마트폰에 적용시켜 보았으며 테스트 결과, 인쇄매체의 이미지 일부가 오염 또는 훼손되어도 인식에 문제가 없이 잘 동작함을 확인하였다.

Keywords

References

  1. 홍동표, 우운택, "모바일 증강 현실 시스템에 대한 연구 동향," 한국정보과학회지, 26, 1, pp. 5-14, 2008.
  2. 장영균, 우운택, 김동철, 신춘성, "모바일 증강현실 기술동향," 개방형컴퓨터통신연구회, 제38권 1호, pp. 44-52, 2010.
  3. S. Oh and W. Woo, "CAMAR: Context-aware Mobile Augmented Reality in Smart Space," International Workshop on Ubiquitous Virtual Reality, pp.48-51, 2009.
  4. Windsor Holden, Mobile Augmented Reality-A whole new world, Whitepaper, Juniper research, 2009.
  5. 전준철, "모바일 증강현실 물체와 몰입형 상호작용을 위한 비전기반 동작제어," 한국 인터넷정보학회, 제12권 3호, pp.119-129, 2011.
  6. Lee, T. and Hollerer, T., "Hand AR: Markerless Inspection of Augmented Reality Objects Using Fingertip Tracking," In Proceedings of IEEE International Symposium on Wearable Computers, pp. 83-90, 2007.
  7. 조휘준, 김대원, "이미지 인식을 이용한 비마커 기반 모바일 증강현실 기법 연구," 신호처리.시스템학회논문지, v.12 no.4, pp.258-266, 2011.
  8. J. Fischer, "Rendering Methods for Augmented Reality," Ph.D Thesis, University of Tubingen, 2006.
  9. 엄기열, 김규진, 김문현, "증강현실 환경하에서 비마커 기반 객체 인식 및 추적 기술 동향," 정보과학회지, 제28권 제8호, pp.54-66, 2010.
  10. H. Bay. T. Tuytelaars, and L. V. Gool. "SURF:Speed Up Robust Feature," In Computer Vision of Lecture Notes in the Computer Science, Springer, Vol.3951, pp.404-417, 2006.
  11. 윤협섭, 한영준, 한헌수, "컬러 불변 특징과 광역 특징을 갖는 확장 SURF(Speed Up Robust Features) 알고리즘", 전자공학회 논문지 제46권, SP편 제6호, 2009.
  12. 목승준, 정경부, 최병욱, "건물 증강현실을 위한 특징점들의 반복패턴 군집화 및 정합," 정보과학회논문지 : 소프트웨어 및 응용, 제39권 제11호, pp.902-911, 2012.