• 스마트미디어저널
• /
• 제7권1호
• /
• pp.31-36
• /
• 2018

본 논문에서는 시선 깊이 추정 기술을 이용한 OST-HMD의 자동화면 on/off 기능을 제안한다. 제안하는 방법은 MLP(Multi-layer Perceptron)을 이용하여 사용자의 시선 정보와 보는 물체의 거리를 학습 한 후, 시선 정보만 입력하여 거리를 추정한다. 학습 단계에서는 착용 할 수 있는 양안 추적기를 사용하여 시선 관련 특징을 얻는다. 그런 다음 이 특징을 다층 퍼셉트론 (MLP: Multi-layer Perceptron)에 입력하여 학습하고 모델을 생성한다. 추론 단계에서는 안구 추적기로부터 실시간으로 시선 관련 특징을 얻고 이를 MLP에 입력하여 추정 깊이 값을 얻는다. 마지막으로 HMD의 화면을 켜거나 끌 것인지 여부를 결정하기 위해 이 계산결과를 활용한다. 제안된 방법의 가능성을 평가하기 위해 프로토타입을 구현하고 실험을 수행하였다.

• 디지털융복합연구
• /
• 제16권12호
• /
• pp.327-334
• /
• 2018

본 연구에서는 스마트 팩토리에서의 AR 기반 원격 협업을 위한 CMS 플랫폼을 제안한다. 스마트 팩토리 현장에서는 시간과 비용 절감을 위해 다양한 형태의 AR 기술을 활용하고 있다. 스마트 팩토리 수준이 높아짐에 따라 사람 중심의 작업에서 기계장치 설비 같은 시스템 중심의 작업이 이루어진다. 따라서 기계장치 설비의 고장 시 작업자가 현장에서 즉시 수리하거나 필요시 도움을 받을 수 있는 시스템이 필요하다. 원격 협업 CMS 플랫폼은 현장의 작업자와 원격지의 시스템 전문가가 필요시 텍스트, 2D 3D 콘텐츠와 스마트 팩토리 사업을 통해 구축된 ERP, MES/POP, PLM 시스템의 DATABASE와 연동하여 기계장치 설비의 상태, 관리 및 수리방법, 매뉴얼 등의 정보를 공유하여 신속하게 수리 관리하여 시간과 비용을 절감하는데 본 연구의 의의가 있다.

• 한국인터넷방송통신학회논문지
• /
• 제21권1호
• /
• pp.195-200
• /
• 2021

교통 수단과 모바일의 발전으로 관광 여행 수요가 증가하고 관련 산업 또한 크게 발전하고 있다. 디지털 미디어 기술 중 한 분야인 증강현실과 관광 콘텐츠의 접목 또한 활발하게 연구 중이며 인공지능은 이미 관광 산업과 다양한 방향으로 접목되어 관광객의 여행 경험을 풍부하게 만들어준다. 본 논문에서는 관광지역을 축소해 제작한 미니어처 모형을 스캔하면, 사전에 딥러닝을 이용해 학습된 모델을 기반으로 해당 관광지를 찾은 뒤 관련 정보와 3D 모델을 AR 서비스로 제공하는 시스템을 제안한다. 다양한 딥러닝 신경망 중 하나인 YOLOv3 신경망을 사용해 모델 학습과 객체 검출을 진행하므로, 빠른 속도로 물체 검출이 이루어져 실시간으로 서비스를 제공할 수 있다.

• 한국정보통신학회논문지
• /
• 제25권5호
• /
• pp.637-644
• /
• 2021

일반적으로, 컴퓨터 비전, 로보틱스, 증강현실 분야에서 3차원 공간 및 3차원 객체 검출 및 인식기술의 중요성이 대두되고 있다. 특히, 마이크로소프트사의 키넥트(Microsoft Kinect) 방식을 사용하는 영상 센서를 통하여 RGB 영상과 깊이 영상을 실시간 획득하는 것이 가능해짐으로 인하여 객체 검출, 추적 및 인식 연구에 많은 변화를 가져오고 있다. 본 논문에서는 다시점 카메라 시스템 상에서의 깊이 기반(RGB-Depth) 카메라를 통해 획득된 영상을 처리하여 3D 복원 영상의 품질을 향상하는 방법을 제안한다. 본 논문에서는 컬러 영상으로부터 획득한 마스크 적용을 통해 객체 바깥쪽 잡음을 제거하는 방법과 객체 안쪽의 픽셀 간 깊이 정보 차이를 구하는 필터링 연산을 결합하여 적용하는 방법을 제시하였다. 각 실험 결과를 통해 제시한 방법이 효과적으로 잡음을 제거하여 3D 복원 영상의 품질을 향상할 수 있음을 확인하였다.

• 융합정보논문지
• /
• 제12권1호
• /
• pp.22-30
• /
• 2022

인적오류로 발생하는 화학사고를 예방하고자 첨단 기술을 응용한 화학사고 예방 및 대응 훈련 프로그램을 개발하였다. 기존에 구축된 파일롯 플랜트(pilot plant)를 바탕으로 가상의 공정을 설계한 후, 화학사고 대응 컨텐츠를 개발하였다. 컨텐츠 구현을 위하여 파일롯 설비 일부를 개조하여 원격제어기능을 부여하였다. 또한, 가상환경에서 설비를 제어할 수 있는 DCS 프로그램을 개발하였으며, AR과 연동하여 최종적으로 가상의 화학사고를 대응할 수 있는 화학공정 운전원 교육(OTS)을 개발하였다. 이를 통해 훈련자가 직접 장치를 조작해봄으써 운전역량을 쌓을 수 있고, 가상의 화학사고를 대응함으로써 비상시 대처능력을 기를 수 있었다. 본 연구와 같은 차세대 OTS가 화학산업에 널리 보급된다면 인적오류에 의한 화학사고를 예방하는데 크게 기여할 것으로 기대된다.

• Korean Journal of Acupuncture
• /
• 제38권4호
• /
• pp.267-274
• /
• 2021

Objectives : Acupoints education is important in that it can determine the clinical competency of Korean Medicine Doctors (KMDs). Accordingly, we aimed to develop a practical simulator for acupoints education, acupoints training, acupoints practice, and acupoints evaluation. Methods : Korean Medicine (KM) SMART Table can be divided into hardware, server and components, and is organically linked. We develop KM SMART Table that combines the hardware of a human-sized table with a UHD display capable of multi-touch in two cases and software that can teach acupoints. We make Augmented Reality (AR) contents linked with KM SMART Table contents and develop applications that can use contents using mobile devices. By developing an AR image tracking module to react with KM SMART Table, it enables acupoint learning according to the mobile device platform and human anatomy. Results : The current system is a prototype where some 3D technology has been implemented, but the AR function will be produced later. New learning using 3D and AR will be required during acupoints education and acupoints practice. It will be used a lot in OSCE (Objective Structured Clinical Examination) practices for strengthening the competency of KMDs, and it will be of great help not only in KM education as a unique simulator of KM, but also in the practice of acupuncture and chuna for musculoskeletal diseases. Conclusions : The KM SMART Table is a technology that combines 3D and AR to learn acupoints, and to conduct acupoints OSCE practice, and we suggest that it can be usefully used for educational evaluation.

• 한국IT서비스학회지
• /
• 제22권4호
• /
• pp.141-157
• /
• 2023

The present work aimed to present the development of 'Funt', the augmented reality-based digital app as an educational tool for foreign language learning. Our work further evaluated the learning efficacy of the tool by the assessment of the three dependent measures including learning motivation, learning satisfaction, and learning involvement. With a learning app of 'Funt', students can use AR app to access recognition-based or location-based experiences such that any objects, artifacts, or media appear to be in the app. Students are then able to interact with the digital content by manipulating it to learn more about it. Students's engagement should also increase when they create their own experience in AR to demonstrate their understanding of a particular concept or words. Learning effects were evaluated on survey data collected from a hundred respondents aging six to nine years. One-group design for pre-test and post-test was utilized to examine the differences of learning efficacy by comparing the non-'Funt' group and the Funt group scores. A pairwise t-Test was performed for pairwise comparisons between two learning groups. The results indicate that the 'Funt' group scored significantly higher than the non-'Funt' group in the measures of learning motivation, learning satisfaction, and learning involvement. Overall, our results suggest that 'Funt' attracted the students' attention, provided them with a fun context to learn English vocabulary, and develop positive motivation and satisfaction towards vocabulary learning through AR technology.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.1009-1014
• /
• 2009

메타적(meta的) 사고는 어떤 범위나 경계를 넘어서는 사고를 통해서 대상을 바라보고 그 본질 이상의 의미로 확장하여 바라보는 것을 말한다. 이는 대상과의 소통에 있어서 새로운 것을 접할 때 경험하게 된다. 디지털 미디어에서 컴퓨터 스크린을 통한 경험은 사용자의 사고를 계속 변화하게 하고 사고의 확장을 돕는다. 컴퓨터 스크린의 해상도 발달은 인간을 스크린 안의 디지털 가상환경(virtual environment)으로 몰입시키며 실재와 착각 할 만큼 확장된 경험을 제공하였다. 이 같이 실재와 같은 경험을 느끼도록 하여 스크린으로 몰입(immersion)을 유도하는 가상현실에 관한 연구는 여러 분야에서 활발하게 진행하고 있다. 컴퓨터 스크린으로의 몰입과 촉각적 상호작용의 연구는 가상현실에 한 걸음 다가가고 있으며, 디지털 가상공간에서 인간의 경험이 투명(transparency)하고자 하는 노력과 연구는 끊임없이 이루어지고 있다. 그러나 컴퓨터 스크린에서 얻는 경험은 아직 시각적 수용에 의존하는 가상의 체험이기에 현실의 것과는 차이가 있으며 표현에 있어서 그 한계가 있다. 최근 가상현실(VR)에 관한 디지털 기술 발달과 디지털 미디어를 통해서 얻는 경험에 관한 고찰이 분명 화제이긴 하지만 이것은 스크린을 통한 시각에 의존한 경험이다. 디지털 미디어에서 투명하고자 하는 경험은 실존하는 것이 아님으로 가상의 경험보다는 실재 사물과의 상호작용을 통한 경험의 확장에 관하여 연구하였다. 이러한 시례는 미디어아트를 통해서도 찾아볼 수 있는데, 이는 수용자에게 적극적 참여를 유도하고 상호작용과정에서 얻는 놀라움(delight)과 유희로 새로운 의미를 알게 된다. 디지털 미디어에서 시각 표현은 기술로 재현된 이미지의 과잉(excess)으로 인한 단순한 볼거리로만 제공되지 말아야 한다. 또한 시각적으로 표현된 인터페이스는 기능의 의미만을 찾는 것이 아니라 고정된 사고의 틀을 벗어나야만 한다. 디지털 미디어 환경에서 디자이너는 본질의 의미를 넘어 메타적 사고로 접근하고 인간의 욕구를 찾아내어 경험을 가시화 하려는 노력이 필요하다.

• 방송공학회논문지
• /
• 제27권5호
• /
• pp.728-737
• /
• 2022

메타버스는 세계적으로 관심이 높아지고 있으며 관련 산업은 빠르게 발전하고 있다. 교육 분야에서도 메타버스에 관한 학생들의 관심이 높아지며 메타버스 관련 기술 및 서비스에 대한 교육이 요구되고 있다. 하지만, 대학에서는 주로 이론적인 교육과 국내외 사례분석 교육으로 구성되어 있으므로, 메타버스 기술을 현실 세계에 적용할 수 있는 실습 교육도 필요한 상황이다. 문화 분야에서의 메타버스 콘텐츠들은 입학식, 전시회와 같은 이벤트성 콘텐츠들이 주로 제작되고 있는데, 사람들이 꾸준하게 방문하여 장기적으로 지속할 수 있는 메타버스 콘텐츠 기획 연구도 필요하다. 본 연구에서는 지속성 있는 메타버스 콘텐츠를 제작하기 위하여 지역 문화 공간을 매개체로 하여 현실 세계에서의 문화 참여와 메타버스 공간의 문화 참여를 연계할 수 있는 교육 콘텐츠를 연구하였다. '문신탄생 100주년 기념 메타버스 문신 미술관' 프로그램은 로블록스에서 학생들이 협업하여 현실 세계의 창원시립문신미술관을 가상 세계로 재해석하였다. '확장현실 문신 미술관' 프로그램은 홀로렌즈를 활용하여 작고하신 문신 작가를 미술관 전시장에 증강함으로써 시간을 초월하는 확장된 메타버스 미술관을 만들었다. 문화와 관련된 전공을 공부하는 학생을 대상으로 메타버스 교육과 실습을 병행하는 교육 프로그램을 진행하였으며 보완하여 교안으로 활용할 계획이다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2022년도 추계학술대회
• /
• pp.187-190
• /
• 2022

본 논문은 메타버스 등 인공지능 연계 증강/가상현실 부동 중계 플랫폼에서 부동산 영상 기반 매물 소개 시스템 구축에서 사생활 및 개인정보가 영상에 담기게 될 수 있는 위험이 존재하기에 부동산 영상 내의 개인정보 및 민감 정보를 인공지능 기술을 기반으로 검출하여 삭제해주고 복원해주는 인공지능 기술 연구개발을 목표로 하였다. 한국형 부동산 내 민감 object 를 정의하고, 최신 인공지능 딥러닝 기술 기반 민감 object detection 알고리즘을 연구 개발하며, 영상에서 삭제된 부분은 인공지능 기술을 기반으로 물체가 없는 실제 공간영상으로 복원해주는 영상복원 기술도 연구 개발하였다. 한국형 부동산 환경 (영상 촬영 조도, 디스플레이 스타일, 주변 가구 배치 등)에 맞는 인공지능 모델 구축을 위하여, 자체적으로 한국 영상 database 구축 및 Transfer learning for target domain adaptation 을 진행하였다. 제안된 알고리즘은 일반적인 환경에서 98%의 정확도와 challenge 환경에서 (occlusion 빛 반사, 저조도 등) 81%의 정확도를 보였다. 본 기술은 Proptech 분야에서 주목받고 있는 메타버스 기반 온라인 중계 서비스 기술을 활성화하기 위하여 기획되었으며, 특히 메타버스 부동산 중계 플랫폼의 활성화를 위하여 사생활 보호 측면에서 필요한 중요 기술을 인공지능 기술을 활용하여 연구 개발하였다.