• Journal of information and communication convergence engineering
• /
• 제15권3호
• /
• pp.193-198
• /
• 2017

In this study, we propose a three-dimensional (3D) visualization technique of occluded objects using integral imaging with a plenoptic camera. In previous studies, depth map estimation from elemental images was used to remove occlusion. However, the resolution of these depth maps is low. Thus, the occlusion removal accuracy is not efficient. Therefore, we use a plenoptic camera to obtain a high-resolution depth map. Hence, individual depth map for each elemental image can also be generated. Finally, we can regenerate a more accurate depth map for 3D objects with these separate depth maps, allowing us to remove the occlusion layers more efficiently. We perform optical experiments to prove our proposed technique. Moreover, we use MSE and PSNR as a performance metric to evaluate the quality of the reconstructed image. In conclusion, we enhance the visual quality of the reconstructed image after removing the occlusion layers using the plenoptic camera.

• Journal of the Optical Society of Korea
• /
• 제19권3호
• /
• pp.248-254
• /
• 2015

In this paper we propose an improved version of the computational integral imaging reconstruction (CIIR) for visualizing a partially occluded object by utilizing an image inpainting technique. In the proposed method the elemental images for a partially occluded three-dimensional (3D) object are recorded through the integral imaging pickup process. Next, the depth of occlusion within the elemental images is estimated using two different CIIR methods, and the weight mask pattern for occlusion is generated. After that, we apply our image inpainting technique to the recorded elemental images to fill in the occluding area with reliable data, using information from neighboring pixels. Finally, the inpainted elemental images for the occluded region are reconstructed using the CIIR process. To verify the validity of the proposed system, we carry out preliminary experiments in which faces are the objects. The experimental results reveal that the proposed system can dramatically improve the quality of a reconstructed CIIR image.

• 한국광학회:학술대회논문집
• /
• 한국광학회 2009년도 동계학술발표회 논문집
• /
• pp.259-260
• /
• 2009

• The Journal of the Acoustical Society of Korea
• /
• 제12권2E호
• /
• pp.80-87
• /
• 1993

본 논문에서는 겹침이 있는 물체의 인식을 위하여 겹침을 당한 물체의 가려진 부분에 대한 추정을 행하는 방법을 제안한다. 주어진 입력화상에서 정점의 호수점의 개수를 셈으로 겹침의 생성 여부를 알 수 있다. 또한 특징추출을 행하기전에 도형의 형태량에 기초하여 겹침을 당한 물체의 가려진 부분을 추정하여 본 논문의 유용성을 여러 실험에 의해 입증하였다.

• 전기전자학회논문지
• /
• 제28권1호
• /
• pp.65-71
• /
• 2024

본 논문은 스테레오 매칭에서 깊이 맵의 정확도를 높이기 위해 폐색 영역의 매칭 오류를 줄이면서 파라메터의 수를 줄일 수 있는 신경망을 제안한다. 이미지를 이용한 상황인식을 보다 정확하게 하기 위해 많은 분야에서 스테레오 매칭기반 객체인식이 활용된다. 복잡한 이미지에 많은 객체가 있을 때 객체간의 겹침과 배경에 의한 가림으로 폐색영역이 발생하여 깊이 맵의 정확도를 낮추게 된다. 이를 해결하기 위해 context 정보를 만들어 cost volume에 결합하거나 폐색영역에 RoI를 만들어 선택하는 기존 연구 방법은 신경망의 복잡도를 높여서 학습의 어려움과 구현에 비용이 많이 들게 된다. 본 논문에서는 cost volume 생성전에 지역적인 특징추출을 보다 강화하는 depthwise seperable 신경망을 만들어 파라메터의 수를 줄이고 폐색 오류에 강인한 신경망을 제안한다. 제안한 신경망은 PSMNet에 비하여 파라메터 수를 30% 줄이면서 페색오류에서 5.3%, 테스트 손실에서 3.6% 개선하였다.

• 정보처리학회논문지B
• /
• 제14B권5호
• /
• pp.351-360
• /
• 2007

비디오 복원(video completion) 기술은 비디오 영상에서 색상 정보가 없는 픽셀에 적절한 색을 채워 영상을 복원하는 기술이다. 본 논문에서는 움직이는 물체가 서로 교차하는 비디오 영상에서 원하지 않는 물체를 제거하고 이때 발생한 영상 홀(image hole)을 채우는 비디오 복원 기술을 제안한다. 움직이는 카메라에서 획득한 비디오 영상에서 이동하는 두 물체 중 카메라와 가까운 물체를 제거함으로써 가려진 이동물체와 배경에 홀이 발생하게 되고, 이 홀온 다른 프레임들의 정보를 이용하여 채움으로써 새로운 비디오를 생성한다. 입력 영상의 모든 프레임에 대해 각 물체의 중심을 추정하여 물체의 중심을 기준으로 시-공간 볼륨(spatio-temporal volume)을 생성하고, 복셀 매칭(voxel matching)을 통한 시간적 탐색(temporal search)을 수행한 후 두 물체를 분리한다. 가리는 물체 영역으로 판단된 부분을 삭제하고 공간적 탐색(spatial search) 방법을 이용하여 홀을 채워 가려짐이 있는 이동 물체 및 배경을 복원한다. 복원된 영상에서 블렌딩을 통해 솔기(seam)를 제거한다. 비디오카메라로 획득한 두 실영상을 이용하여 실험을 수행한 결과 가려진 물체를 복원한 새로운 비디오 영상을 생성할 수 있었다.

• 대한전자공학회논문지
• /
• 제26권1호
• /
• pp.20-28
• /
• 1989

부분적으로 가려진 물체의 인식은 공장자동화를 위한 실제 문제를 해결하는 비젼 응용 분야에서 중요한 문제가 되고 있다. 본 논문에서는 부분적으로 가려진 2차원 물체의 인식 문제를 해결하는 한 기법에 대하여 서술한다. 이러한 기법은 3단계로 구성된다. 즉, 1) 경계점 추적, 2) 선형선소의 추출, 3) 정합확률에 의한 정합벡타의 결정으로 구성된다. 80개의 모델을 포함하고 있는 20개의 영상화면에서 시험해 본 결과는 평균적으로 95%의 인식율을 나타내었다.

• 한국통신학회논문지
• /
• 제16권1호
• /
• pp.23-34
• /
• 1991

본 논문에서는 fuzzy 추론에 의한 중복물체인식에 관해 연구하였다. 영상은 다각형 근사방법을 이용하여 선형선소들의 집합으로 변환되었으며 각 선형선소는 물체의 경계점으로부터 추출된 국부특징점으로 구성되었다. 또한 추출된 특징량을 정보의 불확실성을 나타내는 fuzzy 개념과 대응시킨 fuzzy화 데이터로 나타내었으며, 미지영상에 있어서 모델의 인식은 모델영상으로 부터 생성된 생성규칙을 이용하여 fuzzy 추론에 의해 이루어졌다. 실험을 통하여 불확실성의 정도 변화에 따른 인식 결과의 변화를 고찰하였으며, 120개의 모델이 포함되어 있는 30개의 미지영상에 대해 92.5%의 인식률을 얻었다.

• International Journal of Fuzzy Logic and Intelligent Systems
• /
• 제12권1호
• /
• pp.60-65
• /
• 2012

This paper presents a method for occluded object based motion estimation and tracking system in dynamic image sequences using particle filter with 3D reconstruction. A unique characteristic of this study is its ability to cope with partial occlusion based continuous motion estimation using particle filter inspired from the mirror neuron system in human brain. To update a prior knowledge about the shape or motion of objects, firstly, fundamental 3D reconstruction based occlusion tracing method is applied and object landmarks are determined. And optical flow based motion vector is estimated from the movement of the landmarks. When arbitrary partial occlusions are occurred, the continuous motion of the hidden parts of object can be estimated by particle filter with optical flow. The resistance of the resulting estimation to partial occlusions enables the more accurate detection and handling of more severe occlusions.

• 한국정보디스플레이학회:학술대회논문집
• /
• 한국정보디스플레이학회 2008년도 International Meeting on Information Display
• /
• pp.761-762
• /
• 2008

In this paper, a novel approach for robust recognition of partially occluded 3-D target objects from computationally reconstructed integral images is proposed. The occluding object noises are selectively removed from the picked-up elemental images and performance of the proposed integral imaging-based 3-D target recognition system can be improved.