• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2010.07a
• /
• pp.241-243
• /
• 2010

Previous approaches to the 2D to 3D conversion problem require heavy computation or considerable amount of user input. In this paper, we propose a rather simple method in estimating the depth map from a single image using a monocular depth cue: haze. Using the haze imaging model, we obtain the distance information and estimate a reliable depth map from a single scenery image. Using the depth map, we also suggest an algorithm that converts the single image to 3D stereoscopic images. We determine a disparity value for each pixel from the original 'left' image and generate a corresponding 'right' image. Results show that the algorithm gives well refined depth maps despite the simplicity of the approach.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.11a
• /
• pp.333-336
• /
• 2011

스테레오스코픽 3D 입체영상은 좌/우 영상의 시차(視差)를 이용하여 시청자로 하여금 2D 영상에서 느낄 수 없었던 가상의 입체감을 느낄 수 있도록 한다. 이러한 가상의 입체감은 주로 좌/우 영상의 수평시차를 통해서 구현되며, 수평시차의 많고 적음에 의하여 피사체의 원근(遠近)이 조절된다. 시차가 지나치게 작을 경우 3D 입체영상은 2D와 다를 바 없이 평면으로 보이거나, 피사체의 볼륨감이 사라져서 종이인형들이 단순히 층을 나뉘어서 배열된 것처럼 보이게 된다. 반대로 시차가 지나치게 클 경우 좌/우 영상은 하나로 융합되어 입체감을 형성하지 못하고 이중상으로 관측되게 된다. 이렇듯 3D 입체영상에서 수평시 차의 크기는 핵심적인 기능을 수행하고 있음에도, 프로그램 제작시 적절한 시차를 결정하는 판단기준이 부족하며 최대 시차에 대한 기준도 모호하여, 촬영자나 컴퓨터 그래픽스 작업자의 감(感)에 의하여 입체영상 콘텐츠 제작이 이루어지고 있어, 고품질 3D 영상 제작의 장애요인이 되고 있다. 본 논문에서는 NPP(Native Pixel Parallax) 계산을 바탕으로 입체영상의 시차는 스크린 크기별로 달라질 수 있음을 살펴보고, 좌/우 영상의 시차가 가상깊이로 환산되는 과정을 분석하여, 3D 방송에 적합한 최대 시차를 제안하고자 한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2012.11a
• /
• pp.199-202
• /
• 2012

인터넷 네트워크의 발달로 3D 콘텐츠와 같은 대용량의 미디어 파일을 인터넷 프로토콜을 이용하여 전송 가능해 졌다. 또한 사용자는 스마트 폰, 스마트 TV, tablet-PC 등과 같은 다양한 디바이스를 통해 인터넷 접근이 가능한 여러 장소에서 원하는 콘텐츠를 전달받아 소비하는 형태가 널리 퍼지고 있다. 이에 따라 안정적인 인터넷 네트워크 환경의 필요성과 IP기반 스트리밍 서비스와 같은 기술의 중요성이 부각되고 있는 실정이다. 하지만 유동적인 인터넷 환경에서는 스트리밍 서비스의 QoS(Quality of Service)를 보장하기 힘들고, 3D 입체영상과 같은 고화질, 고용량의 미디어 파일을 대상으로 할 경우 사용자에게 끊김없는 스트리밍 서비스를 제공하기 어렵다. 이러한 문제를 해결하기 위해서, 인터넷 네트워크 환경을 고려하여 사용자들이 원하는 콘텐츠를 고품질 혹은 저 품질로 제공 할 수 있는 적응적 스트리밍 서비스에 관한 기술 개발이 등장하게 되었고, 현재 국제 표준화 기구인 MPEG(Moving Picture experts Group)에서 DASH(Dynamic Adaptive Streaming over HTTP)라는 이름으로 표준화가 진행 중에 있다. 이에 본 논문에서는 DASH를 이용한 3D 콘텐츠의 적응적 스트리밍 서비스를 위하여 스테레오스코픽 영상의 세그먼트 파일규격 구성방안에 대해서 제안한다. DASH를 이용한 3D 스트리밍 서비스는 사용자들에게 IP 망을 통해 다양한 품질의 3D 콘텐츠를 제공할 수 있으며, 또한 하나의 3D 콘텐츠로 다양한 디바이스에 적용 가능하다는 이점이 있다.

• Journal of Broadcast Engineering
• /
• v.11 no.4 s.33
• /
• pp.441-447
• /
• 2006

See-through HMD type 3D display can provide an advantage of us seeing virtual 3D data used stereoscopic display simultaneously with real object(MR-Mixed Reality). But, when user sees stereoscopic display for a long time, not only eye fatigue phenomenon happens but also de-focus phenomenon of data happens by fixed focal point of virtual data. Dissatisfaction of focus adjustment of eye can be considered as the important reason of this phenomenon. In this paper, We proposed an application of multi-focus in see-through HMD as a solution of this problem. As a result, we confirmed that the focus adjustment coincide between the object of real world and the virtual data by multi-focus in monocular condition.

• Journal of Broadcast Engineering
• /
• v.13 no.5
• /
• pp.596-601
• /
• 2008

In this paper, we propose a new scheme to generate region-of-interest (ROI) enhanced depth maps in the hybrid camera system, which is composed of a low-resolution depth camera and a high-resolution stereoscopic camera. The proposed method creates an ROI depth map for the left image by carrying out a three-dimensional (3-D) warping operation onto the depth information obtained from the depth camera. Then, we generate a background depth map for the left image by applying a stereo matching algorithm onto the left and right images captured by the stereoscopic camera. Finally, we merge the ROI map with the background one to create the final depth map. The proposed method provides higher quality depth information on ROI than the previous methods.

• Broadcasting and Media Magazine
• /
• v.15 no.1
• /
• pp.24-36
• /
• 2010

Nowadays, digital broadcasting providers have plan to extend their service area to 3D broadcasting without exchanging conventional system and equipments. The maintenance of backward compatibility to conventional 2D broadcasting system is very importance issue on digital broadcasting. To satisfy the requirement, highly-optimized MPEG-2 video encoder is essential for coding left-view and new video coding techniques having higher performance than MPEG-4 AVC/H.264 is needed for right-view since terrestrial broadcasting system has very limited and fixed bandwidth. In this paper, conventional video coding algorithms and new video coding algorithms are analyzed to present a capable solution for the best quality stereoscopic 3D broadcasting keeping backward compatibility within the bandwidth.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.07a
• /
• pp.301-302
• /
• 2011

최근 3D 디스플레이가 3DTV는 물론 스마트폰이나 태블릿PC와 같이 작은 디스플레이 사이즈와 해상도를 가지는 휴대용 기기들에도 적용되어 다양한 형태로 사용자들에게 보급되어 보다 많은 관심을 받고 있다. 2D+Depth 형태의 입체영상에서 사용자에게 입체감을 주는 데는 깊이맵이 큰 영향을 준다. 또한 깊이맵이 복잡하게 구성되어 있을수록 사용자에게 보다 다양한 입체감을 제공할 수 있지만 실제로 사용자가 느끼는 입체감의 지각은 그렇지 못한 경우가 많기 때문에 사용자가 느끼는 임체감의 개선이 필요하다. 이에 본 논문에서는 깊이맵의 히스토그램을 기반으로 하여 깊이 평면과 깊이 편차를 이용하여 입체감을 개선하는 방법을 제안하고 주관적 실험을 통해 입체감의 변화를 확인하였다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2010.11a
• /
• pp.4-7
• /
• 2010

3D 콘텐츠에 대한 관심이 증가함에 따라 3D 시청 및 제작에 대한 가이드라인의 필요성도 함께 증가하고 있다. 3D 안정 시청 가이드 라인은 3D 시청으로 인한 시청자의 시각적 불쾌감이나 피로감을 방지하는데 목적을 두고 있으며, 최근 일본의 3DC에서는 과도한 수렴-조절 불일치를 방지하기 위해 양안 시차 $1^{\circ}$를 쾌적 시차 범위로 권고하고 있다. 하지만 이 쾌적 시차는 절대적인 수치가 아니며, 콘텐츠의 특성 및 시청 조건에 따라 변하는 것으로 추정된다. 본 논문에서는 쾌적 시차를 갖는 3D 영상 콘텐츠에서 객체의 모션으로 인해 양안시차가 시공간적으로 변할 때, 야기되는 시각적 불편함의 변화에 대하여 관찰한다. 특히, 깊이 방향 모션 및 수평 방향 모션에서 객체의 속도 변화에 대한 시각적 피로감의 정도를 주관적 평가를 통하여 측정한다.

• Journal of Broadcast Engineering
• /
• v.19 no.1
• /
• pp.31-43
• /
• 2014

A depth map is an important component for stereoscopic image generation. Since the depth map acquired from a depth camera has a low resolution, upsamling a low-resolution depth map to a high-resolution one has been studied past decades. Upsampling methods are evaluated by objective evaluation tools such as PSNR, Sharpness Degree, Blur Metric. As well, the subjective quality is compared using virtual views generated by DIBR (depth image based rendering). However, works on the analysis of the relation between depth map upsampling and stereoscopic images are relatively few. In this paper, we investigate the relationship between subjective evaluation of stereoscopic images and objective performance of upsampling methods using cross correlation and linear regression. Experimental results demonstrate that the correlation of edge PSNR and visual fatigue is the highest and the blur metric has lowest correlation. Further, from the linear regression, we found relative weights of objective measurements. Further we introduce a formulae that can estimate 3D performance of conventional or new upsampling methods.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2012.07a
• /
• pp.140-141
• /
• 2012

최근 영상분야의 키워드는 초고품질화, 초실감화, 스마트화로 대표될 수 있다. 그 중에서도 무안경식 3D는 초실감화를 이루기 위한 핵심응용분야 중 하나이다. 하지만 무안경식 3D 단말기가 성공적으로 보급되기 위해서는 연구되어야 할 분야가 여전히 존재한다. 그 중에서도 본 논문에서는 고화질의 무안경식 3D 스마트 콘텐츠 제작에 필요한 자동 스테레오 정합 기법을 제안하였다. 이전까지 연구된 변이지도 추출을 위한 알고리즘은 전역적 최적화 방법을 사용할 시 영상의 해상도와 깊이 정도에 따른 연산량의 증가로 많은 수행시간이 요구되었다. 또한 좌/우 영상의 intensity 정보만으로는 정확한 변이지도 추출이 어렵다는 한계점이 존재하였다. 이러한 이유로 본 논문에서는 스트림 영상에서 프레임 간의 정보를 이용하여 신뢰지도와 경계정보를 생성하였으며 belief propagation 스테레오 정합 방법을 이용하여 고화질의 정확한 변이지도를 추출하였다. 또한, 알고리즘의 연산량에 대한 문제를 해결하기 위한 고속화 방안으로, 최근 많은 연구가 이루어지고 있는 GPU(graphics processing units) 를 이용한 병렬처리를 연구하였다. 마지막으로 연구결과의 신뢰성을 향상하기 위하여 다양한 데이터를 이용한 실험을 통해 고화질의 영상정보를 고속으로 추출할 수 있음을 확인하였다.