DOI QR코드

DOI QR Code

Mobile Panorama System via 3D Model Reconstruction

3차원 모델 재구성을 통한 모바일 파노라마 시스템

  • 김진희 (숙명여자대학교 멀티미디어과학과) ;
  • 최윤철 (연세대학교 컴퓨터과학과) ;
  • 한탁돈 (연세대학교 컴퓨터과학과) ;
  • 임순범 (숙명여자대학교 멀티미디어과학과)
  • Received : 2010.12.28
  • Accepted : 2011.07.06
  • Published : 2011.08.31

Abstract

We can use panorama systems or image based modeling systems when we want to make 3D space model and look around result. Panorama systems make 3D model to stitch images and map cylinder or cube. The structure of 3D model, made by panorama system, is not same as structure of a real room, so user can't infer a real structure. Typically, Image based modeling systems work on a desktop computer. That makes it difficult to reconstruct 3D model in real time and take long time for processing. In this paper, we propose a 3D panorama modeling system that uses images on a mobile device. This system reconstructs a 3D space model, similar with a real room in real time, from multiple images captured part of rooms. Using this system, user can reconstruct various shape of space and look around a 3D space model.

이미지를 통하여 공간 구축 방법은 파노라마 시스템과 이미지 기반 모델링이 있다. 파노라마 시스템으로 구축된 공간은 사진을 이어 붙이는 형식으로 실제 구조와 일치하지 않아 정확한 구조를 파악하기 힘들다. 이미지 기반 모델링은 대부분 데스크탑을 기반으로 하고 있어 실시간으로 공간 구성이 어렵고, 이미지 처리를 위한 시간이 많이 든다. 따라서 본 논문에서는 모바일을 이용하여 현장에서 사용할 수 있고, 실제 공간과 일치하는 구조를 가지는 3D 공간을 구성하는 방법을 제안한다. 본 연구에서는 여러 장의 이미지로 공간 전체를 3D로 구성한다. 사용자의 스케치 입력을 통하여 이미지에서 공간의 구조 정보를 얻고 입력된 구조 정보들 중 바닥면을 기본 단면으로 하여 전체 공간의 파노라마 구조 정보를 구성한다. 이렇게 구성된 파노라마 구조 정보로부터 벽면, 바닥면 천장면으로 분리하여 3D 공간을 모델링하고 텍스쳐를 매핑함으로 3D 파노라마 공간의 재구성이 완료된다. 본 연구를 통하여 사용자는 쉽고 빠르게 다양한 구조의 3D 공간을 구축하여 살펴볼 수 있었다.

Keywords

References

  1. 김은미, 임순범, "가상 건축물 시뮬레이션을 위한 클라이언트 중심의 모바일 증강현실 시스템," 멀티미디어학회논문지, 제11권 제2호, pp. 228-236, 2008.
  2. 신은주, 최윤철, 임순범, "3D 가상공간에서 의사표현을 위한 Sketch Annotation 제시기법에 관한 연구," 멀티미디어학회 논문지, 제12권 10호, pp.1466-1477, 2009.
  3. 김소양, 최윤철, 임순범, "스케치 기법을 이용한 모바일 이미지 기반 3D 환경 구축," 한국컴퓨터그래픽스학회, 2007년 하계학술대회 논문집, pp.115-116, 2007.
  4. 김세환, 우운택, "3차원 영상 기반 파노라마를 이용한 가상 환경 생성," IPIU, Vol.13, pp. 111-116, 2003.
  5. Shenchang Eric Chen, "$QuickTime{\circledR}$ VR- An Image-Based Approach to Virtual Environment Navigation," ACM SIGGRAPH'95, pp.29-38, 1995.
  6. Microsoft Photosynth, "http://photosynth.net/"
  7. J. Boutellier, O. Silv´en, M. Tico, and M. Vehvil¨ainen, "Creating panoramas on mobile phones," In Electronic Imaging Conference, San Jose, California, USA, 2007.
  8. S. Ha, H. Koo, S. Lee, N. Cho, and S. Kim, "Panorama mosaic optimization for mobile camera systems," IEEE Transactions on Consumer Electronics, 53(4), 2007.
  9. S. Ha, H. Koo, S. Lee, N. Cho, and S. Kim, "Photographing for on-line Mobile Panorama", In International Conference on Consumer Electronics, 2008.
  10. Yingen Xiong, Xianglin Wang, Marius Tico, Chia-Kai Liang, and Kari Pulli, "Panoramic Imaging System for Mobile Devices," ACM SIGGRAPH 2009.
  11. Kari Pulli, Marius Tico, and Yingen Xiong, "Mobile Panoramic Imaging System," 2010 IEEE Computer Society Conference on Computer Vision and Pattern Recognition Workshops (CVPRW), pp.108-115, 2010.
  12. Kyoungju Park, "Photographing for On-line Mobile Panoramas," International Conference on Consumer Electronics, 2008. ICCE 2008. Digest of Technical Papers, pp.1-2, 2008.
  13. Derek Hoiem, Alexei A. Efros, and M. Heber, "Automatic Photo Pup-up," ACM SIGGRAPH 2005.
  14. Michitaka Hirose, "Virtual Reality Technology and Museum Exhibit," The International Journal of Virtual Reality, Vol.5, No.2, pp.31-36, 2006.
  15. Takashi Aoki, Tomohiro Tanikawa, and Michitaka Hirose, "3D World from 2D Photos," LNCS, Vol.4557, pp.249-257, 2007.
  16. Brainstorm Technology, "PhotoSketch 2.0 Google Sketchup Plugin," http://www.brainstormllc.com/
  17. Sudipta N. Sinha, Drew Steedly, Richard Szeliski, Maneesh Agrawala, and Marc Pollefeys, "Interactive 3D Architectural Modeling from Unordered Photo Collections," ACM SIGGRAPH Asia 2008.

Cited by

  1. Development of Video Caption Editor with Kinetic Typography vol.17, pp.3, 2014, https://doi.org/10.9717/kmms.2014.17.3.385
  2. Implementation of Interactive 3D Aquaium from 2D Images Using 3D Model Conversion Algorithm vol.18, pp.12, 2015, https://doi.org/10.9717/kmms.2015.18.12.1562