• 한국통신학회논문지
• /
• 제33권6C호
• /
• pp.450-458
• /
• 2008

본 논문에서는 양안시차를 이용한 스테레오 영상의 부호화 기법을 H.264/AVC 기반으로 스테레오 영상을 실시간으로 전송하기 위한 효과적인 시스템을 제안한다. OpenCV를 이용하여 스테레오 웹캠으로부터 영상을 획득하고, 전처리 과정으로 입력 시스템을 통해 획득한 스테레오 영상을 YUV 4:2:0 파일 포맷으로 변환한다. 변환된 파일은 스테레오 부호화기로 입력되고 제안된 예측구조에 의해 부호화기의 복잡도를 감소시킴으로써 초당 30프레임 이상의 부호화 속도로 부호화 된다. 부호화된 비트스트림 파일은 복호화기에 입력되어 좌, 우 스테레오 영상으로 재 생성된다. 재 생성된 스테레오 영상은 입체영상으로 합성되어 3D 디스플레이 장치를 통해 사용자에게 보여지게 된다. 제안된 시스템은 기존의 스테레오 코덱을 사용했을 때 보다 최소 1.5dB에서 최대 3dB의 압축효율이 뛰어남을 본 실험을 통하여 검증 및 확인하였다. 본 연구는 저 대역폭, 저 전력의 실시간 전송을 위한 모바일환경에 응용이 가능할 것으로 기대된다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제22권5호
• /
• pp.49-56
• /
• 2016

Oculus Rift, HTC Vive 등의 PC기반 Virtual Reality Head Mount Display 뿐 아니라, Google Cardboard, Samsung Gear VR등과 같은 모바일 VR HMD들이 출시 되고 있다. 그런데 HMD는 착용 시 사용자의 외부시야를 가리게 되므로 VR을 체험하는 공간의 실제 환경에 존재하는 각종 가구에 걸려 넘어지거나 벽 등의 위험요소들에 의해 사용자가 부딪혀 다치고 또는 가구 등이 파손 되는 상황이 일어날 수 있지만 아직 이것에 대해서 확실한 방안이 연구되어 있지 않은 상태이다. 본 논문에서는 Microsoft Kinect V1를 이용하여 사용자가 움직일 공간을 미리 3d Scanning하고 Minimap 방식으로 Scanning한 장애물의 위치 및 정보를 몰입감을 덜 저하시키면서 시각화하여 사용자에게 알려줌으로써 부상위험을 줄이는 방법으로 VR의 대중화를 돕는 방안을 제시 한다.

• 전자공학회논문지CI
• /
• 제49권3호
• /
• pp.27-33
• /
• 2012

텔레프레즌스(tele-presence)와 원격조정(tele-operation) 기술은 멀리 떨어진 사용자에게 몰입감이 높은(immersive) 장면이나 모바일 로봇 등의 제어 환경을 제공한다. 본 논문에서는 호모그래피(homography) 정보 기반의 카메라 추적기술을 이용한 텔레프레즌스 시스템이 제안된다. 먼저 카메라가 탑재된 HMD(head mounted display)를 착용한 사용자의 머리 움직임을 카메라 추적기술로 분석한다. 그리고 전방향(omni-directional) 카메라를 장착한 로봇으로부터 입력되는 파노라마 영상에서 사용자의 시야(field of view)에 해당하는 장면을 생성하여 HMD를 통해 디스플레이한다. 사용자의 움직임을 추정하는 과정에서 3차원 평면으로 구성된 공간의 호모그래피 정보를 이용하며, 실제로 측정된 3차원 데이터를 기준으로 마커기반의 ARToolkit을 이용하는 방법과 호모그래피 기반 방법의 정확도를 각각 비교하였다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2012년도 하계학술대회
• /
• pp.385-387
• /
• 2012

본 논문에서는 스테레오 기반 카메라 추적 방법을 이용하여 3차원 모바일 디스플레이 상의 증강현실에서 증강된 가상 객체의 3차원 효과가 올바르게 나타나도록 하는 방법을 제안한다. 3차원 디스플레이에 가상 콘텐츠를 증강시키기 위해서는 카메라의 정확한 위치와 자세를 추정하는 것도 중요하지만, 증강된 가상 콘텐츠의 시각적 3차원 효과가 올바르게 나타나도록 하는 것도 중요하다. 이를 위해서는 좌우 카메라의 3차원 공간상의 관계가 유지되도록 양측 카메라의 위치 및 자세를 동시 추정(joint estimation)할 필요가 있다. 제안된 방법은 스테레오 카메라와 패럴렉스 배리어 방식의 3차원 디스플레이가 장착된 안드로이드 스마트폰에서 구현되고 실험되었다.

• ETRI Journal
• /
• 제34권1호
• /
• pp.17-23
• /
• 2012

This paper analyzes the feasibility of a new 3DTV broadcasting service scenario via Advanced Television Systems Committee Mobile/Handheld (ATSC-M/H). We suggest a dual-channel system in which a left-view image is encoded by MPEG-2 with HD quality and a small-sized right-view image is encoded by AVC. Also, the left view is transmitted through ATSC main channel and the right view is transmitted through ATSC-M/H channel. Although the transport stream formats of two channels are different from each other, we demonstrate that it is possible for the ATSC 2.0 decoder to synchronize the display of the left and right views when both encoders use a common wall clock and time stamp. We also propose a program specific information descriptor which guarantees full compatibility with the conventional 2D HDTV and emerging mobile TV services. Finally, we provide the results of subjective visual quality assessment of the proposed system in support of its 3DTV service quality.

• 한국컴퓨터정보학회논문지
• /
• 제24권11호
• /
• pp.61-69
• /
• 2019

본 연구에서는 문화유산 교육을 위한 다중 감각 (시각 청각 촉각) 지원 기반 증강현실 시스템을 제안한다. 제안된 시스템에서는 3D프린트 된 유사유물 모델을 AR 타깃으로 활용하고, 증강하는 가상객체에는 실제유물 기반으로 구현된 3D그래픽을 매핑한다. 사용자는 3D프린트 된 모델의 촉감을 느끼면서 AR유물학습을 진행할 수 있어 다중 감각을 통한 상호작용을 경험하게 된다. 기존 문화유산 교육 시스템과 비교했을 때 본 시스템은 시각 및 청각뿐만 아니라 촉각을 제공하는데 중점을 두고 설계되었다. 또한 이 시스템은 3D모델을 사용하여 직접적인 상호작용을 제공하여, 주로 휴대전화와 태블릿의 2D 디스플레이에 터치 또는 클릭 모션으로 상호작용하는 기존 시스템보다 훨씬 사실적인 경험을 주도록 구성되었다. 사용자 테스트 결과에 따르면 본 유물교육시스템은 사용자에게 우수한 현존감 및 학습 몰입감을 제공하였으며, 타깃의 사용성 평가에서는 본래 유물과 모양이 유사한 3D 프린트 된 타깃의 사용성이 가장 좋게 평가되었다.

• 한국산학기술학회논문지
• /
• 제18권4호
• /
• pp.578-583
• /
• 2017

본 논문은 최근에 모바일 기기에 적용되고 있는 차세대 터치 기술로서 압력터치 센서를 이용한 3D 터치패드 기술에 관한 것이다. 3D터치 기술은 터치 위치 및 터치 압력을 동시에 검출할 수 있고 멀티터치 기능이 있어야 한다. 본 논문의 목적은 스트레인 게이지를 이용하여 압력터치 센서를 제작하고 2점을 동시에 터치 가능한 압력터치 패드 제작이다. 하드웨어 부분은 터치 인식 센서에 금속 박막형 스트레인 게이지를 이용하였고 각 스트레인 게이지 센서마다 휘스톤 브리지 회로로 미세한 터치 신호를 검출하였다. 또한, 터치 신호 증폭기를 사용하여 터치 신호를 증폭하고 마이크로프로세서를 통해 디지털 데이터로 변환하여 화면에 디스플레이하는 터치 인식 시스템을 만들었다. 소프트웨어 부분은 2점 동시터치가 가능하고 터치 압력에 따라 구별 가능한 터치 인식 알고리즘을 C언어로 제작하였다. 터치 강도와 터치 위치가 다른 두 개의 터치 신호를 동시에 검출하여 화면에 나타내는 실험을 성공적으로 수행하였다. 본 연구를 통해 스트레인 게이지를 이용한 터치 인식 방법으로 3D 터치패드의 응용 가능성을 확인하였다.

• International Journal of Internet, Broadcasting and Communication
• /
• 제15권4호
• /
• pp.215-222
• /
• 2023

Augmented reality (AR), which integrates virtual media into reality, is increasingly utilized across various industrial sectors, thanks to advancements in 3D graphics and mobile device technologies. The IT industry is thus carrying out active R&D activities about AR platforms. Google plays a significant role in the AR landscape, with a focus on ARCore services. An essential aspect of ARCore is the use of anchors, which serve as reference points that help maintain the position and orientation of virtual objects within the physical environment. However, if the accuracy of anchor positioning is suboptimal when running AR content, it can significantly diminish the user's immersive experience. We are to assess the performance of these anchors in this study. To conduct the performance evaluation, virtual 3D objects, matching the shape and size of real-world objects, we strategically positioned ourselves to overlap with their physical counterparts. Images of both real and virtual objects were captured from five distinct camera trajectories, and ARCore's performance was analyzed by examining the difference between these captured images.

• 한국HCI학회논문지
• /
• 제2권2호
• /
• pp.45-51
• /
• 2007

공장 내 생산설비 배치나 건물 내 인테리어 디자인에서, 생산성 및 전체 디자인을 손상하지 않고 장비들을 신규 도입 혹은 재배치하는 것은 고비용의 작업이다. 이러한 실제 물체들을 가상공간에서 배치 시뮬레이션 하기 위한 방법으로 본 논문에서는 혼합현실 기반의 인터페이스를 제안한다. 제안된 인터페이스는 공장 내 생산설비 배치를 위한 시뮬레이션 알고리즘이 적용되었다. 제안된 인터페이스의 하드웨어는 이동식의 PC 플랫폼위에 사용자 입력을 위한 터치스크린과 비디오카메라가 장착되어 영상을 실시간적으로 보여주는 디스플레이(video see-through display) 를 사용한다. 가상물체와 실제물체가 정교히 합성된 혼합 현실 영상에서 터치 입력을 통해 가상 물체들을 회전 및 이동을 통해 재배치한다. 구현된 인터페이스를 통해, 우리는 제안된 인터페이스가 공간 배치 응용 분야에서 유용성이 있음을 확인하였다.

• 반도체디스플레이기술학회지
• /
• 제15권2호
• /
• pp.61-65
• /
• 2016

Facial feature detection is a fundamental function in the field of computer vision such as security, bio-metrics, 3D modeling, and face recognition. There are many algorithms for the function, active shape model is one of the most popular local texture models. This paper addresses issues related to face detection, and implements an efficient extraction algorithm for extracting the facial feature points to use on iOS platform. In this paper, we extend the original ASM algorithm to improve its performance by four modifications. First, to detect a face and to initialize the shape model, we apply a face detection API provided from iOS CoreImage framework. Second, we construct a weighted local structure model for landmarks to utilize the edge points of the face contour. Third, we build a modified model definition and fitting more landmarks than the classical ASM. And last, we extend and build two-dimensional profile model for detecting faces within input images. The proposed algorithm is evaluated on experimental test set containing over 500 face images, and found to successfully extract facial feature points, clearly outperforming the original ASM.