• Journal of the Institute of Convergence Signal Processing
• /
• v.6 no.3
• /
• pp.112-119
• /
• 2005

In this paper, a model of neural circuit was proposed, which abstracts the depth information in two images gotten from right and left retinas. The proposed neural circuit corresponds to binocular stereo vision based on psychologic and physiological knowledge, and we examine a restoration method of three-dimensional surface. In case of drawing a disparity based on characteristics of images, we can not abstract the depth information correctly if resemblant characteristics are repeated on the boundary region of an object. A binocular disparity is decided in a model of neural circuit by abstraction, synthesis, and correction of a disparity. And we propose a method which restores three-dimensional shape by correcting a depth information, and also restores a three-dimensional surface by mapping a left input image on the restored three-dimensional shape. And we confirmed that the computation time for disparity abstraction can be greatly reduced through the simulation.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.1087-1092
• /
• 2006

몰입도가 높은 가시화 기법 중 하나인 입체 영상은 차세대 미디어의 표준으로 최근 크게 주목 받고 있다. 그러나 일반 2차원 영상과는 달리 입체 영상은 3차원의 기하정보가 존재해야만 영상을 생성하는 것이 가능하다. 따라서 3차원의 기하정보가 존재하지 않는 2차원 영상을 이용한 입체 영상의 저작은 매우 어려운 문제이다. 본 논문은 영상 기반 모델링 기법을 활용하여 단안 영상으로부터 입체 영상을 생성하기 위한 입체 영상 저작 도구를 제안한다. 이를 위해 입력된 영상에서 사영 기하 정보를 사용하여 깊이 정보를 추론함으로써 3차원 환경을 구성하는 전역 깊이 정보 추출 방법과 영상 내에 존재하는 사물의 정확한 깊이 정보로 수정하기 위한 부분 깊이 정보 수정 방법을 제안한다. 또한, 추출한 깊이 정보로부터 몰입감이 높은 입체 영상의 시점을 결정하기 위한 대화식 입체 영상 미리 보기 기능을 제안한다. 본 논문에서 제안한 기법은 2차원 영상 저작 도구인 포토샵의 플러그인으로 구현함으로써 범용성을 높였다.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2010.10a
• /
• pp.343-344
• /
• 2010

markerless system to a two-dimensional imaging is used to estimate the depth map as a stereo vision system uses expensive equipment. We estimate the depth map from monocular image enhancement and object extracted relative to the vanishing point is estimated depth map. Augmented objects in order to get better virtual immersion depending on the distance of the objects should be drawn in different sizes. In this paper, creating images obtained from the vanishing point, and in-depth information on the augmented object, augmented with different sizes and improved engagement of inter-object interaction.

• Journal of Broadcast Engineering
• /
• v.13 no.4
• /
• pp.427-439
• /
• 2008

This paper proposes a novel method to convert monoscopic soccer videos to stereoscopic videos. Through the soccer video analysis process, we detect shot boundaries and classify soccer frames into long shot or non-long shot. In the long shot case, the depth mapis generated relying on the size of the extracted ground region. For the non-long shot case, the shot is further partitioned into three types by considering the number of ground blocks and skin blocks which is obtained by a simple skin-color detection method. Then three different depth assignment methods are applied to each non-long shot types: 1) Depth estimation by object region extraction, 2) Foreground estimation by using the skin block and depth value computation by Gaussian function, and 3)the depth map generation for shots not containing the skin blocks. This depth assignment is followed by stereoscopic image generation. Subjective evaluation comparing generated depth maps and corresponding stereoscopic images indicate that the proposed algorithm can yield the sense of depth from a single view images.

• Journal of Broadcast Engineering
• /
• v.17 no.3
• /
• pp.459-470
• /
• 2012

In this paper, we propose a method to upsample a low-resolution depth map to a high-resolution version. While conventional camera sensors produce high-resolution color images, the sizes of the depth maps of range/depth sensors are usually low. In this paper, we consider the utilization of high-frequency components to the conventional depth map interpolation methods such as bilinear, bicubic, and bilateral. The proposed method is composed of the three steps: high-frequency component extraction, high-frequency component application, and interpolation. Two objective evaluation measures such as sharpness degree and blur metric are used to examine the performance. Experimental results show that the proposed method significantly outperforms other conventional methods by a factor of 2 in terms of sharpness degree. As well, a blur metric is reduced by a factor of 14 %.

• Journal of Digital Convergence
• /
• v.12 no.11
• /
• pp.309-316
• /
• 2014

In this paper, we propose an efficient detph map creation method using Graph Cut and Discrete Wavelet Transform. First, we have segmented the original image by using Graph Cut to process with its each areas. After that, the information which describes segmented areas of original image have been created by proposed labeling method for segmented areas. And then, we have created four subbands which contain the original image's frequency information. Finally, the depth map have been created by frequency map which made with HH, HL subbands and depth information calculation along the each segmented areas. The proposed method can perform efficient depth map creation process because of dynamic allocation using depth information. We also have tested the proposed method using PSNR(Peak Signal to Noise Ratio) method to evaluate ours.

• Journal of the Institute of Electronics Engineers of Korea CI
• /
• v.47 no.3
• /
• pp.29-35
• /
• 2010

This paper discusses a method that can enhance the exactness of depth estimation of an image by PCA(Principle Component Analysis) based on feature reduction through learning algorithm. In estimation of the depth of an image, hyphen such as energy of pixels and gradient of them are found, those selves and their relationship are used for depth estimation. In such a case, many features are obtained by various filter operations. If all of the obtained features are equally used without considering their contribution for depth estimation, The efficiency of depth estimation goes down. This paper proposes a method that can enhance the exactness of depth estimation of an image and its processing speed is considered as the contribution factor through PCA. The experiment shows that the proposed method(30% of an feature vector) is more exact(average 0.4%, maximum 2.5%) than using all of an image data in depth estimation.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2012.07a
• /
• pp.315-317
• /
• 2012

본 논문에서는 인체의 골격 위치와 깊이 정보를 사용하여 주위 환경에 강건한 특성을 지니는 움직이는 사람 영역 검출 방법을 제안한다. 먼저 영상 내에서 인체의 골격 위치를 검출한 다음 인체 골격의 중심이 될 수 있는 지점에 대해 인체의 평균적 깊이 범위 내에서 깊이 세분화를 수행한다. 그리고 깊이 세분화를 통하여 검출된 사람 영역의 후보군에 대해 윤곽선 기반의 움직임 검출기법을 사용하여 후보군 내에서 움직이는 사람에 해당하는 특징점을 검출한다. 마지막으로 잡음 제거 및 움직이는 사람에 해당하는 영역 검출을 위하여 개선된 깊이 세분화 과정을 수행한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.14-17
• /
• 2020

단안 영상에서의 깊이 추정은 주어진 시점에서 촬영된 2 차원 영상으로부터 객체까지의 3 차원 거리 정보를 추정하는 것이다. 최근 딥러닝 기반으로 단안 RGB 영상에서 깊이 정보 추정에 유용한 특징 맵을 추출하고 이를 이용해서 깊이를 추정하는 모델들이 기존 방법들의 성능을 넘어서면서 관련된 연구가 활발히 진행되고 있다. 또한 Attention Model 과 같이 특정 특징 맵의 채널 혹은 공간을 강조하여 전체적인 네트워크의 성능을 개선하는 연구가 소개되었다. 본 논문에서는 깊이 정보 추정을 위해 사용되는 특징 맵을 강조하기 위해서 Attention Model 을 추가한 AutoEncoder 기반의 깊이 추정 네트워크를 제안하고 적용 부분에 따른 네트워크의 깊이 정보 추정 성능을 평가 및 분석한다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2012.06c
• /
• pp.448-450
• /
• 2012

본 논문에서는 Kinect 방식의 RGB-D 영상센서를 사용하여, 깊이(Depth) 영상으로부터 3차원 객체의 기하정보를 표현하는 표면 정규 벡터(Surface Normal Vector)를 추출하고, 그 결과를 영상화하는 방법을 제안하며, 제안된 방법으로 생성된 영상으로부터 깊이 영상의 특징점 및 특징 기술자를 추출하여 3차원 객체 인식 성능을 향상시키는 방법을 제안한다. 또한 생성된 RGB-D 특징 기술자들을 객체 단위로 구분 가능한 코드북(CodeBook) 학습을 통한 인식방법을 제안하여 객체의 인식 성능을 높이는 방법을 제안한다. 제안하는 RGB-D 기반의 특징 추출 및 학습 방법은 텍스쳐 유무, 카메라 회전 및 이동 변화 등의 환경변화에 강건함을 실험적으로 증명하였으며, 이 방법은 Kinect 방식의 RGB-D 영상을 사용하는 3차원 객체/공간 인식 및 추적, 혹은 이를 응용하는 증강현실 시스템에 적용하여 사용될 수 있다.