• Journal of Digital Contents Society
• /
• v.15 no.1
• /
• pp.69-76
• /
• 2014

In this study, by using the control technique of the user using augmented reality technology, to provide a game system touch-based. The augmented reality technology, can be advantageously used vehicle is easily recognized as a technique for synthesizing (images, video, text) object of the virtual image of the real world. Augmented reality technology has been studied to make the application in various fields. Studies of natural marker-based marker and base are underway, but there is no sense of incongruity in reality research natural marker-based and has been studied much. By using the augmented reality technology natural marker-based In this paper, we implemented a game system. The system also has the advantage that can be absorbed in the game by using the techniques of the interaction through a user's touch. Touch interface-based, are available as well as user environments, even in mobile devices such as smart-phone and touch pad.

• Annual Conference of KIPS
• /
• 2023.11a
• /
• pp.763-765
• /
• 2023

본 논문에서는 저성능 컴퓨터나 스마트폰의 카메라를 통해 입력받은 영상을 기반으로 사용자의 포즈를 추정하고, 실시간으로 사용자의 포즈에 따라 3D 모델의 모션이 제어되어 가시화 될 수 있는 클라이어트-서버 구조의 "자세추정 및 3D 모델 모션 제어 시스템"을 제안한다. 제안 시스템은 소켓통신 기반의 클라이언트-서버구조로 구성되어, 서버에서는 실시간 자세 추정을 위한 딥러닝 모델이 수행되고, 저성능 클라이언트에서는 실시간으로 카메라 영상을 획득하여 영상을 서버에 전송하고, 서버로부터 자세 추정 정보를 받아 이를 3D 모델에 반영하고 렌더링 함으로써 사용자와 함께 3D 모델이 같은 동작을 수행하는 증강현실 화면을 생성한다. 고성능을 요구하는 객체 자세 추정 모듈은 서버에서 실행하고, 클라이언트에서는 영상 획득 및 렌더링만을 실행하기 때문에, 모바일 앱에서의 실시간 증강현실을 위한 자세 추정 및 3D 모델 모션 제어가 가능하다. 제안 시스템은 "증강현실 기반 영상 찍기 앱" 에 반영되어 사용자의 움직임을 따라하는 3D 캐릭터들의 영상을 쉽게 생성할 수 있도록 할 수 있다.

• Journal of the Korea Computer Graphics Society
• /
• v.22 no.3
• /
• pp.11-20
• /
• 2016

This paper introduces an effective method for generating 3D stereoscopic images that gives immersive 3D experiences to viewers using mobile-based binocular HMDs. Most of previous AR systems with monocular cameras have a common limitation that the same real-world images are provided to the viewer's eyes without parallax. In this paper, based on the assumption that viewers focus on the marker in the scenario of marker based AR, we recovery the binocular disparity about a camera image and a virtual object using the pose information of the marker. The basic idea is to generate the binocular disparity for real-world images and a virtual object, where the images are placed on the 2D plane in 3D defined by the pose information of the marker. For non-marker areas in the images, we apply blur effects to reduce the visual discomfort by decreasing their sharpness. Our user studies show that the proposed method for 3D stereoscopic image provides high depth feeling to viewers compared to the previous binocular AR systems. The results show that our system provides high depth feelings, high sense of reality, and visual comfort, compared to the previous binocular AR systems.

• 한국HCI학회:학술대회논문집
• /
• 2007.02a
• /
• pp.96-102
• /
• 2007

본 논문에서는 자연스러운 증강현실 환경을 위하여 패치 기반의 텍스쳐 합성을 통한 마커 은닉 방법을 제안한다. 증강현실에서 카메라의 자세를 구하기 위한 보편적인 방법은 음영 대비가 뚜렷한 정사각형의 마커를 사용하는 것이다. 이러한 인위적인 마커의 사용은 물체의 인식과 추적을 용이하게 하지만 증강된 장면의 실감성을 감소시켜 사용성 저하를 유발하기도 한다. 제안된 마커 은닉 방법은 실시간성을 보장하면서, 배경 텍스쳐의 전역적인 특성을 유지하고, 주변 환경의 변화에 유연하다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2014.06a
• /
• pp.75-76
• /
• 2014

증강 현실(Augmented Reality)은 현실 세계에 어떤 부가 정보가 덧붙여진 현실이다. 증강 현실 응용은 주로 스마트폰에 내장된 카메라를 통해 실시간으로 입력받은 이미지 정보를 분석하거나, GPS 정보, 전자 나침반 정보 등을 이용해서 증강 현실응용에 맞는 부가 정보를 입력받은 영상 위에 덧붙여서 구현한다. 하지만 다양한 회사에서 각자의 방식대로 증강 현실 응용을 구현하기 때문에, 개별적으로 구현된 증강 현실 시스템은 서로 호환이 되지 않고 이는 증강 현실 산업의 발전을 막는 걸림돌이 되고 있다. 이러한 문제점을 해결하고 관련 산업의 활성화를 꾀하고자 JPEG 기반 증강 현실 시스템을 제안하였고, 이 제안은 최근 ISO/IEC JTC1 SC29 WG1(JPEG) 표준화 단체에서 받아들여져 ISO/IEC 19710(JPEG AR) 표준화가 시작되었다.

• Annual Conference of KIPS
• /
• 2013.11a
• /
• pp.392-395
• /
• 2013

본 논문에서는 안드로이드 기만의 스마트폰 시스템에서 증강현실(AR)을 이용하여 지리정보 및 카메라 화면을 이용한 지리정보 서비스 시스템을 구현한다. 최근 안드로이드 기반의 스마트폰 어플리케이션을 이용한 지리정보 서비스 어플리케이션 활용이 많아지고 있으며, 카메라 기반의 영상정보를 활용할 수 있는 기반이 많이 확대 되었기 때문에, 증강현실과 지리정보를 연결한 캠퍼스 정보 서비스 시스템에 대한 요구가 많이 있다. 본 논문에서 개발한 증강현실 기반의 안드로이드 캠퍼스 정보 서비스 시스템은 사용자들의 개별 수업 시간표 정보와 연동하여 학생들이 제 시간에 강의실 및 그룹 토론장소, 회의장소등의 시간, 지리적 서비스를 효율적으로 활용할 수 있도록 디자인하고 구현하였다. 본 논문의 애플리케이션을 활용하면 캠퍼스 강의에 효율적으로 활용할 수 있을 것으로 본다.

• Journal of Digital Contents Society
• /
• v.10 no.4
• /
• pp.521-527
• /
• 2009

This paper suggests a collision techniques for a higher reality in augmented reality by processing collision between a real object obtained through video frame input and a marker-based virtual object or a virtual object from Opengl. Augmented reality system is providing the visual information containing a virtual object added to the real environment and interactive interface between objects and between user and objects becomes a more concerning interest. But the collision problem is essential to the interactive interface and has to be solved first. Therefore, the proposed system suggests a solution for it to increase the realism and the immersion by validating the collision among a marker-based object, a virtual object from Opengl, and a real object obtained through web camera, that is, video frame.

• Journal of the HCI Society of Korea
• /
• v.2 no.2
• /
• pp.11-18
• /
• 2007

We propose a novel method to conceal fiducial markers observed in augmented scenes using patch-based texture synthesis. Despite the efficiency for simple object recognition and tracking, the markers deliver inherent obtrusiveness. They do not only reduce immersiveness, but also severely degrade usability of augmented reality. The proposed method constructs alternative images in real time to overlay markers present in the sequence of images. The global characteristics of background textures are retained and the results are more adaptive to illumination changes.

• Journal of Broadcast Engineering
• /
• v.27 no.3
• /
• pp.341-350
• /
• 2022

In this paper, we propose a deep learning based on-device augmented reality (AR) system in which multiple input images are used to implement the correct occlusion in a real environment. The proposed system is composed of three technical steps; camera pose estimation, depth estimation, and object augmentation. Each step employs various mobile frameworks to optimize the processing on the on-device environment. Firstly, in the camera pose estimation stage, the massive computation involved in feature extraction is parallelized using OpenCL which is the GPU parallelization framework. Next, in depth estimation, monocular and multiple image-based depth image inference is accelerated using the mobile deep learning framework, i.e. TensorFlow Lite. Finally, object augmentation and occlusion handling are performed on the OpenGL ES mobile graphics framework. The proposed augmented reality system is implemented as an application in the Android environment. We evaluate the performance of the proposed system in terms of augmentation accuracy and the processing time in the mobile as well as PC environments.

• Journal of the Korea Society of Computer and Information
• /
• v.16 no.7
• /
• pp.49-58
• /
• 2011

Augmented Reality(AR) assists human's cognitive ability through the information visualization by substantiating information about virtual situation. This technology is studied in a variety of ways including education, design, industry, and so on, by various supply of information devices equipped with cameras and display monitors. Since the most of the AR system depends on limited interaction that responds to the order from user, it can not reflect diverse real world situation. In this study, we suggest a knowledge based augmented reality system, which is composed of context awareness agent that provides recognized context information, along with knowledge based component that provides intelligent capability by utilizing domain knowledges. With this capability, the augmented object can generate dynamic model intelligently by reflecting context information, and can make the interaction possible among the multiple objects. We developed rule based context awareness system along with 3D model generation, and tested interaction among the augmented objects. And we suggest a framework that can provide a convenient way of developing augmented reality system for user.