• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2003년도 신호처리소사이어티 추계학술대회 논문집
• /
• pp.175-178
• /
• 2003

This paper proposes a stereo image insertion technique on DCT coefficients using the embedded method developed in the digital watermarking in due consideration of compatibility with conventional 2D system such JPEG, and MPEG. In conventional transmission method users with conventional digital TV cannot watch the transmitted 3D image sequence as 2D image, because of affectivity of conventional 3D image compression. To give an answer, in this paper, DCT coefficients are changed according to its disparity on YCbCr channels. Our method can insert stereo images into a conventional image compression method based on DCT.

• 제어로봇시스템학회:학술대회논문집
• /
• 제어로봇시스템학회 2004년도 ICCAS
• /
• pp.1098-1101
• /
• 2004

The ordinary stereo image of an object consists of data of left and right views. Therefore, the left and right image pairs have to be transmitted simultaneously in order to display 3-dimentional video at the remote site. However, due to the twice data in comparing with a monoscopic image of the same object, it needs to be compressed for fast transmission and resource saving. Hence, it needs an effective coding algorithm for compressing stereo image. It was found previously that compressing left and right frames independently will achieve the compression ratio lower than compressing by utilizing the spatial redundancy between both frames. Therefore, in this paper, we study the stereo image compression technique based on the multiresolution wavelet transform using varied disparity-block size for estimation and compensation. The size of disparity-block in the stereo pair subbands are scaling on a coarse-to-fine wavelet coefficients strategy. Finally, the reference left image and residual right image after disparity estimation and compensation are coded by using SPIHT coding. The considered method demonstrates good performance in both PSNR measures and visual quality for stereo image.

• 대한전자공학회논문지SP
• /
• 제40권2호
• /
• pp.29-36
• /
• 2003

본 논문에서는 디지털 워터마킹을 이용하여 기존2차원 TV와 호환가능한 새로운 3차원 동영상 전송기법을 제안한다. 일반적으로 3차원 영상을 효과적으로 전송하기 위해 스테레오 영상간의 시간적 공간적 중복성을 이용한 동영상 전송방법을 사용하고 있다. 그러나 3차원 영상의 압축에 대한 효율성 때문에 복호화과정에서 기존의 일반 디지털 TV로는 전송된 3차원 영상의 시청이 불가능한 단점이 있다. 이러한 문제점을 개선하기 위해 제안한 방법에서는 디지털 워터마킹이 시각적으로 보이지 않는 곳에 새로운 정보를 은닉시키는 부분에 착안하여 스테레오 영상의 다른 한쪽 영상의 정보를 기준 영상의 각 채널별로 은닉하여 복호화시 3차원 영상의 복원 뿐만아니라 기존의 디지털 TV로도 시청 가능하도록 하였다.

• 방송공학회논문지
• /
• 제10권3호
• /
• pp.286-296
• /
• 2005

본 논문은 3차원 실감 영상 텔레비전을 위한 스테레오 기반 영상 압축 및 전송장치에 관한 것이다. 본 논문에서는 입력되는 두 개의 스테레오 영상에서 영상처리 기반 disparity map을 추출하고, 추출된 disparity map과 두 개의 스테레오 영상 중에 한 개의 영상만을 전송하거나 저장하는 방식이다 기존의 방식은 occlusion 지역에서 대응점을 결정할 수 없는 문제로 인하여 3차원 영상 복원 시 데이터가 손실되는 단점을 가지고 있다. 본 논문에서는 블록기반 에러 은닉 기법과 루프 필터를 사용한 복원 영상 보정 알고리즘을 제안하여 3차원 영상 복원 시 생길 수 있는 오차를 최소화하였다. 제안한 알고리즘의 효율성을 보이기 위하여 다양한 실제 영상을 사용하였으며 영상 복원 정확성의 객관적 판단기준을 통하여 제안한 알고리즘이 스테레오 영상을 표현하는데 효과적인 방법임을 증명하였다.

• 한국컴퓨터정보학회논문지
• /
• 제12권4호
• /
• pp.87-94
• /
• 2007

스테레오 영상은 서로 다른 카메라에 의해 취득되기 때문에 잠재적으로 서로 차이가 있고, 이것은 디스패리티 추정시 큰 오차를 유발할수 있으며, 오차분포를 크게하여 전송될 비트레이트에 영향을 줄 수 있다. 따라서 본 논문에서는 밸런싱함수 추정을 통해 스테레오 영상을 밸런싱하는 방법을 제안한다. 이를 위해, 본 논문에서는 FFT방법을 이용하여 스테레오 영상을 정합하고, Occlusion된 영역의 픽셀들을 고려하기 위해, 디스패리티 벡터 추정 오차값이 큰 블록의 픽셀들을 밸런싱함수 추정에서 제외하였다. 밸런싱함수는 히스토그램 specification방법과 영상의 국부정보, 오차영상을 이용하여 추정하였다. 밸런싱될 영상의 각 레벨들의 맵핑 구간을 히스토그램 specifation 방법을 통해 계산하며 다중 맵핑되는 픽셀들의 경우, 오차영상에서 그 픽셀들의 근방에서 구한 평균들과 밸런싱될 영상(타깃 영상)에서 맵핑될 픽셀의 근방에서 구한 평균이 최소값을 갖는 위치값을 통해 추정하였다. 또한, 추정된 밸런싱함수의 정확성을 향상하기 위해, 오차분포값이 최소가 될 때까지 반복하여 추정하였다. 제안된 방법은, 실험 결과와 같이, 작은 오차분포와 향상된 PSNR 결과를 나타내며 디스패리티 벡터 추정에도 향상된 결과를 보여준다. 그러므로, 스테레오 코딩 시스템에 적용되어 효과적으로 전송량 데이터양을 줄일 수 있을 것으로 기대된다.

• 방송공학회논문지
• /
• 제17권4호
• /
• pp.684-694
• /
• 2012

수중 환경에서 물과 부유물에 의한 빛의 감쇄와 산란은 수중 영상의 색상을 열화시키고 가시성을 저하시키는 주요 원인이 된다. 이러한 수중 산란광은 피사체와의 거리의 함수로 표현되므로 깊이 정보는 빛의 전달률을 계산하기 위한 중요한 정보를 제공한다. 본 논문에서는 깊이 영상을 이용하여 전달률을 측정하고 이를 기반으로 영상의 각 화소에 존재하는 산란에 의한 열화값을 제거함으로써 수중 스테레오 영상의 가시성을 개선하는 방법을 제안한다. 제안하는 방법은 제거해야 하는 열화값이 영상의 화소값 보다 크지 않도록 보정하여 가사성 개선 시 나타날 수 있는 부분적인 영상 왜곡을 방지한다. 또한 수중 스테레오 영상의 심각한 문제점 중의 하나인 색상 불균형을 효과적으로 보정하여 가시성 개선 후 좌, 우 영상의 동일성을 유지한다. 실험 결과는 다양한 환경의 수중 영상에 대하여 제안하는 가시성 개선 후 색대비가 영상에 따라 5%에서 14%이상 향상되었음을 보여준다.

• 방송공학회논문지
• /
• 제14권3호
• /
• pp.322-331
• /
• 2009

본 논문은 윤곽선 기반 메쉬 최적화를 이용한 스테레오 영상의 효율적인 데이터 표현 방법을 제안한다. 스테레오 영상에 대한 메쉬 기반 2차원 워핑은 주로 제어점 선택과 선택된 제어점들의 시차 정보 추정 성능에 의존한다. 따라서 제안된 방법은 제어점 선택을 위하여 강한 윤곽선과 객체의 경계선만으로 구성된 특징 지도를 생성하고 이를 기반으로 격자형 메쉬를 생성한다. 또한, 지역단위로 2차원 워핑을 수행하며 목적영상과의 오차를 최소로 하는 제어점의 위치를 반복적으로 추정하게 된다. 최적화된 제어점 위치를 찾기 위한 반복적 2차원 워핑 과정은 많은 계산 시간을 요구하기 때문에 이를 개선하기 위하여 입력된 스테레오 영상은 수평 시차만 존재하고 최적의 제어점 위치는 객체의 경계선을 포함한 윤곽선 위에 존재함을 가정한다. 따라서 제안한 윤곽선 기반 워핑 방법은 수평선 위에 윤곽선만을 따라 반복적으로 최적화된 제어점 위치를 탐색한다. 본 논문의 실험에서는 스테레오 영상에 대하여 제어점 수에 따른 신호에 대한 잡음비(PSNR)를 측정하여 기존 방법과 제안한 방법의 품질을 비교 하였다. 뿐만 아니라 최적의 메쉬 생성을 위한 수행시간을 비교하여 평가하였다. 실험 결과를 통하여 제안한 방법은 적은 수의 제어점을 이용하여 품질의 저하를 줄이고 빠르게 최적의 메쉬를 생성함으로써 효율적인 스테레오 영상 표현 방법을 제공하였다.

• 방송공학회논문지
• /
• 제24권6호
• /
• pp.965-973
• /
• 2019

본 논문에서는 Stereo 4K@60fps 360 VR 실시간 영상 획득 시스템을 영상 스트림 획득과 영상 인코딩(encoding), 영상 스티칭(stitching) 모듈로 나누어 설계하였다. 시스템은 6대의 카메라로부터 HDMI Interface를 통해 획득된 6개의 2K@60fps의 영상 스트림을 스티칭을 통하여 실시간으로 Stereo 4K@60fps 360 VR 영상을 획득한다. 영상 획득 단계에서는 멀티 스레드(Multi-Thread)를 이용하여 각 카메라로부터 실시간으로 영상 스트림을 획득하였다. 영상 인코딩 단계에서는 영상 획득과 영상 스티칭 모듈 간의 전송 리소스를 줄이기 위하여 멀티 스레드를 이용한 Raw Frame 메모리 전송과 병렬 인코딩을 하였다. 영상 스티칭 단계에서는 스티칭 Calibration 전처리작업을 통하여 스티칭 실시간성을 확보하였다.

• 정보처리학회논문지B
• /
• 제15B권1호
• /
• pp.9-16
• /
• 2008

본 논문에서는 스테레오 영상으로부터 중간 시점 영상을 생성하는 알고리즘을 제안한다. 사람이 3차원 영상을 자연스럽게 인지하기 위해서는 다시점의 영상이 필요하다. 이를 위해 많은 수의 카메라를 이용하면 시스템이 복잡하고 커지며 전송량도 문제가 된다. 따라서 송신측에서 스테레오 영상만을 촬영하여 송신하고, 수신측에서 여러 장의 중간 시점 영상을 생성하는 방법을 생각할 수 있다. 제안하는 방법은 스테레오 영상간의 시차에 따른 화소의 차로 표현되는 시차공간영상을 생성한다. 시차공간영상을 이용하여 최적의 시차 경로를 탐색하여 시차 지도를 만든다. 최종적으로 정합이 이루어지지 않은 가려짐 영역을 처리한 후에 중간 시점의 영상을 생성한다. 제안한 방법으로 생성한 영상은 30 dB PSNR 이상의 결과를 얻었다.

• 한국통신학회논문지
• /
• 제31권1C호
• /
• pp.55-64
• /
• 2006

본 논문에서는 실시간으로 입력되는 스테레오 영상에 효과적인 시차 추정 기법을 적용한 새로운 웹 기반의 원격 다시점 3D 화상 통신 시스템을 구현하였다. 제시된 방법에서는 먼저, IEEE 1394 방식의 스테레오 카메라를 이용하여 자체 설계된 Intel Xeon 서버 시스템을 통해 실시간으로 입력되며, 입력된 스테레오 영상을 중심으로 특징점의 크기에 따라 세밀하면서도 정확한 시차 지도를 검출한 뒤, 검출된 시차지도와 좌 영상을 Directshow SDK를 이용하여 네트워크 채널로 연결된 클라이언트 영역으로 전송하게 된다. 전송된 클라이언트 영역에서는 수신된 시차지도와 좌 영상을 중심으로 정확한 우 영상을 복원한 뒤, 중간시점 합성 기법을 이용하여 16시점의 다시점 입체 화상 통신을 이루게 된다. 각기 다른 상황에서 촬영된 'Joo' 영상과 'Hoon'영상을 웹 기반의 실시간 전송 및 중간영상 합성 실험결과, 본 논문에서 제안된 전송기법으로 우 영상을 복원할 경우 각각 30dB, 27dB의 높은 PSNR이 측정되었으며, 4시점의 8비트 영상을 전송할 경우, 각각 67.2ms의 속도로 디스플레이 함으로써 이를 통한 새로운 실시간 웹 기반의 원격 3D 화상 통신 시스템의 실질적인 구현 가능성을 제시하였다.