• 방송공학회논문지
• /
• 제12권4호
• /
• pp.342-349
• /
• 2007

In general multi-view system, all the view sequences acquired at the server are transmitted to the client. However, this kind of system requires high processing power of the server as well as the client, thus it is posing a difficulty in practical applications. To overcome this problem, a relatively simple method is to transmit only two view-sequences requested by the client in order to deliver a stereoscopic video. In this system, effective communication between the server and the client is one of important aspects. Therefore, we propose an efficient multi-view system that transmits two view-sequences according to user's request. The view selection process is integrated into MPEG-21 DIA (Digital Item Adaptation) so that our system is compatible to MPEG-21 multimedia framework. Furthermore, multi-view descriptors related to multi-view camera and systems are newly introduced. The syntax of the descriptions and their elements is represented in XML (extensible Markup Language) schema. Intermediate view reconstruction (IVR) is used to reduce such discomfort with excessive disparity. Furthermore, IVR is useful for smooth transition between two stereoscopic view sequences. Finally, through the implementation of testbed, we can show the valuables and possibilities of our system.

• 제어로봇시스템학회논문지
• /
• 제8권10호
• /
• pp.874-880
• /
• 2002

A number of techniques have been proposed for 3D display using view-difference of two eyes. These methods do not express enough reality like real world. The display images have to change according to the position of a viewer to improve reality. In this paper, we present an approach for generating intermediate image between two different view images by applying new image interpolation algorithm The interpolation algorithm is designed to cope with complex shapes. The proposed image interpolation algorithm generates rotated image about vertical axes by any angle from base images. Each base image that was obtained from CCD camera has an view-angle difference of $3^{\circ}C$, $5.5^{\circ}C$, $^{\circ}C$, $22^{\circ}C$, and $45^{\circ}C$. The proposed into mediate image generation method uses the geometric analysis of image and depth information through the block-based matching method.

• Journal of information and communication convergence engineering
• /
• 제19권2호
• /
• pp.108-113
• /
• 2021

Multiview autostereoscopic three-dimensional (MA3D) displays have the disadvantage that the single-view resolution decreases as the number of views increases. Furthermore, the resolution of MA3D displays is relatively degraded, even though the resolution of two-dimensional displays has increased recently. Therefore, it is unattractive to consumers, and the single-view resolution enhancement of MA3D displays is required. In this study, we developed a method for supplementing the single-view resolution of MA3D displays using a plate beam splitter that can show two MA3D displays simultaneously. By applying our proposed method, the resolution of a single view can increase, and the visual obstruction by the optical plate, which is a problem for MA3D displays, can be solved. In addition, an MA3D display was optically designed and fabricated using a parallax barrier. Finally, the experimental optical results obtained using the proposed method and the only MA3D display were compared.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제12권12호
• /
• pp.6034-6056
• /
• 2018

This paper describes two user studies in remote collaboration between two users with a video conferencing system where a remote user can draw annotations on the live video of the local user's workspace. In these two studies, the local user had the control of the view when sharing the first-person view, but our interfaces provided instant control of the shared view to the remote users. The first study investigates methods for assisting drawing annotations. The auto-freeze method, a novel solution for drawing annotations, is compared to a prior solution (manual freeze method) and a baseline (non-freeze) condition. Results show that both local and remote users preferred the auto-freeze method, which is easy to use and allows users to quickly draw annotations. The manual-freeze method supported precise drawing, but was less preferred because of the need for manual input. The second study explores visual notification for better local user awareness. We propose two designs: the red-box and both-freeze notifications, and compare these to the baseline, no notification condition. Users preferred the less obtrusive red-box notification that improved awareness of when annotations were made by remote users, and had a significantly lower level of interruption compared to the both-freeze condition.

• 한국통신학회논문지
• /
• 제32권6C호
• /
• pp.579-584
• /
• 2007

최근 다시점 비디오를 효율적으로 부호화하기 위해 다양한 시공간 예측 구조들이 제안되었다. 이 논문에서는 다시점 비디오 부호화 예측 구조에서 각 GOP의 첫 화면들에 삽입되는 B$_{ANC}$ 화면을 위해 양자화 계수를 결정하는 방법을 제안한다. 각 시점의 영상 화질을 균일하게 유지하고 전체적인 부호화 효율을 높이기 위해 B$_{ANC}$ 화면의 양자화 계수를 적응적으로 조절하며, 인접한 두 참조화면의 비트-왜곡 비용값을 사용하여 상관도를 추정하고 이를 이용하여 B$_{ANC}$ 화면의 양자화 계수를 결정한다. 이 논문에서 제안한 방법을 다시점 비디오 참조 예측 구조에 적용하여 부호화한 결과, 0.09$\sim$0.16 dB 정도의 PSNR 개선을 얻었다.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2001년도 하계종합학술대회 논문집(4)
• /
• pp.65-68
• /
• 2001

In this paper, we propose a method to interpolate two images obtained from two parallel cameras. The proposed method uses BDM(Bidirectional Disparity Map) to prevent hole generation due to occlusion. Furthermore, we use the block-based DM(Disparity Map) to decrease the amount of computation, and also use the adaptive block size to minimize the error of the block-based DM.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제13권11호
• /
• pp.5546-5559
• /
• 2019

Facial action units (AUs) have recently drawn increased attention because they can be used to recognize facial expressions. A variety of methods have been designed for frontal-view AU detection, but few have been able to handle multi-view face images. In this paper we propose a method for multi-view facial AU detection using a fused multilayer, multi-task, and multi-label deep learning network. The network can complete two tasks: AU detection and facial view detection. AU detection is a multi-label problem and facial view detection is a single-label problem. A residual network and multilayer fusion are applied to obtain more representative features. Our method is effective and performs well. The F1 score on FERA 2017 is 13.1% higher than the baseline. The facial view recognition accuracy is 0.991. This shows that our multi-task, multi-label model could achieve good performance on the two tasks.

• 방송공학회논문지
• /
• 제23권2호
• /
• pp.316-319
• /
• 2018

ATSC 3.0 및 국내 UHD 방송 표준에 의해 제공되는 PLP 기능을 이용하여 지상 UHD 방송 서비스 및 모바일 HD 방송 서비스가 동시에 제공되는 경우, 약간의 부가 데이터를 전송함으로써 고품질의 UHD-3D 방송 서비스를 제공할 수 있다. 입체 영상의 좌우 영상을 입력하고, 하나의 시점 영상을 SHVC 방식으로 부호화하고, 다른 시점 영상을 양안 교차 방식의 SHVC 방식으로 부호화한다. 그런데 2 개의 인코더의 기본 레이어(BL)가 서로 공통이기 때문에, 2 개의 인코더는 하나의 BL 스트림 및 2 개의 확장 레이어 (EL) 스트림을 생성하는 인코더에 대응한다. UHD-3D 방송 서비스를 위해 세 번째의 독립적인 HEVC 부호화를 적용하는 것과 비교할 때 제안 기법의 평균 인코딩 효율은 16% 더 효율적이다. 또한 제안된 기법은 영상 프레임 당 PSNR의 변동을 줄이고 최소 PSNR 프레임의 화질을 0.6dB 증가시킨다.

• 방송공학회논문지
• /
• 제9권3호
• /
• pp.214-224
• /
• 2004

본 논문에서는 차세대 실감형 3차원 영상 처리와 3차원 TV 3차원 화상회의 등과 같은 3차원 실감 미디어의 부호화에 적합한 H.264 기반의 적응적 시공간적 예측 부호화를 제안한다. 첫 번째로, 두 가지의 IPPP와 IBBP GOP(group of picture) 구조에서 기존의 동시방송(simulcast) 방식과 다르게 same-view와 inter-view 영상의 적응적 시공간적 예측 부호화를 제안한다. 두 번째로, GOP 구조가 IBBP에서 제안된 inter-view 방식의 예측 부호화시 B(hi-predictive) 화면이 MB(macroblock) 모드중 하나인 시간적 직접방식(temporal direct mode)을 수행하려고 할 때 참조 화면이 inter-view 영상을 참조하는 경우 현재의 시간적 직접 방식을 효율적으로 수행하기 위해서 2차원 inter-view 직접 방식을 제안한다. 제안된 방식은 실험결과에서 기존의 동시방송 방식과 비교되었으며 각각의 GOP 구조 모두 화질 면에서 우수한 결과를 확인할 수 있었다.

• 스마트미디어저널
• /
• 제2권4호
• /
• pp.27-33
• /
• 2013

다시점 영상 시스템은 실감나는 3차원 입체감을 제공하고, 사용자로 하여금 자유로운 시점을 선택할 수 있게 한다. 하지만 한 번에 많은 양의 데이터를 전송하는 것은 어려운 일이므로 두 시점 흑은 세 시점의 영상을 전송하고, 깊이 정보를 이용하여 중간 시점의 영상을 합성하여 제공한다. 본 논문에서는 양안식 영상으로부터 고품질의 다시점 영상을 생성하는 방법을 제안한다. 먼저 스테레오 정합은 폐색 영역을 비롯한 모든 화소들의 정확한 변위 값을 찾을 수 없기 때문에, 배경 값을 이용하여 폐색 영역의 화소들을 처리하는 방법을 제안한다. 또한 합성 영상의 품질을 저하시키는 변위 영상 내의 물체 경계선 불일치 문제점 해결을 위해 결합형 양방향 필터를 적용한다. 마지막으로 불량 화소와 빈 공간때문에 발생하는 오류를 줄이기 위해 신뢰 영상을 이용하여 중간 시점의 영상을 생성한다. 실험을 통해 제안한 방법을 이용할 때 기존의 방법보다 합성 성능이 뛰어남을 확인했다.