Journal of the Korea Computer Graphics Society (한국컴퓨터그래픽스학회논문지)

Korea Computer Graphics Society (한국컴퓨터그래픽스학회)
권호 표지
DOI QR코드

DOI QR Code

Hybrid Model Representation for Progressive Indoor Scene Reconstruction

실내공간의 점진적 복원을 위한 하이브리드 모델 표현

  • Received : 2015.11.13
  • Accepted : 2015.11.28
  • Published : 2015.12.01
Download PDF
⟨ Previous Next ⟩

Abstract

This paper presents a novel 3D model representation, called hybrid model representation, to overcome existing 3D volume-based indoor scene reconstruction mechanism. In indoor 3D scene reconstruction, volume-based model representation can reconstruct detailed 3D model for the narrow scene. However it cannot reconstruct large-scale indoor scene due to its memory consumption. This paper presents a memory efficient plane-hash model representation to enlarge the scalability of the indoor scene reconstruction. Also, the proposed method uses plane-hash model representation to reconstruct large, structural planar objects, and at the same time it uses volume-based model representation to recover small detailed region. Proposed method can be implemented in GPU to accelerate the computation and reconstruct the indoor scene in real-time.

본 논문에서는 전통적으로 삼차원 모델 복원에 사용되는 볼륨 기반 자료 구조의 한계점을 극복하기 위해 평면 해시 구조를 볼륨 구조와 상호보완적으로 사용하는 하이브리드 모델 표현을 제안한다. 실내 환경에 대한 삼차원 모델 복원은 좁은 공간에 대한 정밀한 복원 결과를 얻기 위해 볼륨 기반의 자료 구조를 사용하였으나, 이러한 볼륨 기반의 자료 구조는 메모리의 사용량이 많아 대규모 공간에 대한 삼차원 복원으로 확장이 용이하지 못하였다. 본 논문에서는 이러한 기존 삼차원 모델 복원의 확장성을 증가시키기 위해 메모리를 효율적으로 사용하는 평면 해시 모델 구조를 제안한다. 또한 이러한 제안된 평면 해시 모델 구조를 넓고 단순한 평면 복원을 위해 사요하고, 좁고 디테일한 공간 복원에는 기존 볼륨 구조를 동시에 사용하는 하이브리드 복원 방법을 사용한다. 제안된 기법은 GPU 상에서 구현되어 공간을 실시간으로 복원 가능하다.

Keywords

Acknowledgement

Supported by : 한국연구재단, 정보통신기술진흥센터

References

  1. R. Newcombe, A. Davison, S. Izadi, P. Kohli, O. Hilliges, J. Shotton, D. Molyneaux, S. Hodges, D. Kim and A. Fitzgibbon, "KinectFusion: Real-time dense surface mapping and tracking", IEEE international symposium on Mixed Augumented Reality, 127-136, 2011
  2. R. A. Newcombe, S. J. Lovegrove, and A. J. Davison. "DTAM: Dense tracking and mapping in real-time", IEEE International Conference on Computer Vision, 6(13), 2320-2327, 2011
  3. M. Niessner, M. Zollhofer, S. Izadi and M. Stamminger "Real-time 3D reconstruction at scale using voxel hashing", ACM Transactions on Graphics, 32(6), 169:1-169:11, 2013
  4. S. Agruwal, N. Snavely, I. Simon, S. M. Seitz, and R. Szeliski. "Building rome in a day", Communications of the ACM, 54(10), 105-112, 2011 https://doi.org/10.1145/2001269.2001293
  5. J. Xiao and Y. Furukawa, "Reconstructing the World's Museums", International Journal of Computer Vision, 110(3), 243-258, 2014 https://doi.org/10.1007/s11263-014-0711-y
  6. Y. Zhang., W. Xu, Y. Tong and K. Zhou, "Online structure analysis for real-time incklor scene reconstruction", ACM Transactions on Graphics, 34(5), 159 :1-159 :13, 2015
  7. H. Lee, E. Shechtman, J. Wang and S. Lee, "Automatic Upright Adjustment of Photographs with Robust Camera Calibration", IEEE Transactions on Pattern Analysis & Machine Intelligence, 36(5), 833-844, 2014 https://doi.org/10.1109/TPAMI.2013.166
  8. J. Chen, D. Bautembach, and S. Izadi, "Scalable real-time volumetric surface reconstruction", ACM Transactions on Graphics, 32(4), 113:1-113:8, 2013.
  9. Q. Y Zhou and V. Koltun, ''Dense scene reconstruction with points of interest", ACM Transactions on Graphics, 32(4), 112 :1-112 :8, 2013
  10. G. Petschnigg, M. Agrawala, H. Hoppe, R. Szeliski, M. Cohen and K. Toyama, "Digital Photography with Flash and No-Flash Image Pairs", ACM Transactions on Graphics, 23(3), 664-672, 2004 https://doi.org/10.1145/1015706.1015777