• Journal of Korea Entertainment Industry Association
• /
• v.14 no.3
• /
• pp.133-138
• /
• 2020

Interaction is an important component in the sense of immersion in augmented reality. However, the function of interaction in augmented reality contents is very weak. Bringing a lot of real environmental information is one of the ways to develop augmented reality, and interaction will naturally develop. In this paper, Leap Motion was used for natural interaction in augmented reality environment through the hand widely used as an interface tool, and extended more from the limited interaction of conventional display touch methods to create a natural interaction. This development of interaction will contribute to the development of various contents as well as augmented reality later.

• 한국HCI학회:학술대회논문집
• /
• 2007.02a
• /
• pp.567-572
• /
• 2007

빠른 인터넷의 보급과 빈번하게 발생하는 원격지 구성원간의 협업으로 인해서 쉽고 편리하게 이용 가능한 다자간 협업 환경의 필요성이 대두되었으며 현재 이와 관련한 연구가 활발히 진행되고 있다. 커뮤니티 컴퓨팅 환경에서의 원격 협업을 지원하기 위한 구성 기술로는 먼저 지능형 원격협업을 지원할 수 있는 시스템 및 네트워킹 구조를 설계하는 기술, 다양한 종류의 입력 채널의 내용을 동시에 보여줄 수 있는 디스플레이를 제공하는 기술, 협업 구성원 간의 자연스러운 데이터 및 태스크 마이그레이션 기반 기술, 그리고 다양한 사용자 인터랙션을 제공하는 기술 등이 있다. 그러나 무엇보다도 사용자 편의성 면에서는 위치적인 이질감을 극복하고 현장감 있는 공동 작업을 지원할 수 있는 사용자 인터랙션 기술이 매우 중요하다고 할 수 있다. 본 논문에서는 이러한 인터랙션을 지원하기 위한 다양한 인터랙션 기술을 소개하며 사용자의 인터랙션이 발생했을 경우 사용자의 의도에 따라 변경된 협업 환경, 특히 공통 디스플레이 화면의 변경 정보를 사용자 컨트롤 머신에도 Graphic User Interface(GUI) 기술을 통해 제공하는 방안이 논의되어 진다.

• The Journal of the Korea Contents Association
• /
• v.10 no.2
• /
• pp.43-53
• /
• 2010

The interactive display is providing various interaction modes to users through various ubiquitous computing technologies. These methods were studied for their interactions, but the limits that it is provided to only single user and the device usability were generated. In this paper, we propose a new type of spatial multi interaction interface that provide the various spatial touch interactive to multi users in the ambient display environment. Therefore, we generate the interaction surface so that a user can interact through the IR-LEDs Array Bar installed in the ceiling of the ambient display environment. At this time, a user can experience the various interactions through the spatial touch in an interaction surface. Consequently, this system offers the interactive display and interface method that the users can interact through natural hand movement without the portable devices.

• 한국HCI학회:학술대회논문집
• /
• 2008.02a
• /
• pp.91-96
• /
• 2008

증강현실(Augmented Reality)을 위한 효과적인 비전 기반 인터페이스 개발은 꾸준히 진행되어 왔으나, 대부분 환경적 제약을 받거나, 특수한 장비 혹은 복잡한 모델을 요구한다. 예를 들어, 마커를 이용하면 구현 상의 편의성과 정확성을 보장하지만, 일반적으로 마커는 환경과 대비되는 모양을 가지기 때문에, 사용자에게 거부감을 줄 수 있으며 무엇보다 복잡한 인터랙션에는 적용되기 힘들다. 한편, 손동작을 이용할 경우, 자연스럽고 다양한 인터랙션을 수행할 수 있지만, 색을 이용한 손동작 인식은 복잡한 환경에서 인식률이 크게 저하되고, 3 차원 모델 기반의 손동작 인식은 많은 연산량을 필요로 한다는 문제점을 가진다. 이로 인해 지금까지 제안된 방법을 증강현실 시스템에 적용하는 데는 한계가 있다. 본 논문에서는 기본적으로 손동작을 이용한 인터페이스를 제안하는데, 손동작 인식을 위한 알고리즘을 효율적으로 개선함으로써, 복잡한 환경에서 적은 연산량으로 자연스러운 인터랙션을 제공하고자 한다. 제안방법은 손목에 컬러 밴드를 착용하고, 색 정보를 이용하여 손을 포함하는 최소 영역을 용이하게 검출함으로써, 손 동작 인식률이 좋아지도록 하였다. 제안된 인터페이스는 손의 자연스러운 움직임을 감지해서 손의 모양과 동작에 따라서 가상의 물체를 자연스럽게 제어할 수 있도록 해 준다. 예를 들어, 손이 지정한 위치에 가상의 물체를 나타내고, 가상의 물체를 잡고 다양한 조작을 하는 등의 제어를 할 수 있다. 다양한 환경에서의 실험 및 사용자 평가를 통해 제안된 인터페이스의 유용성을 검증하였다.

• Smart Media Journal
• /
• v.12 no.1
• /
• pp.77-91
• /
• 2023

Interaction methods and technologies for mutual exploration based on user behavior are evolving variously. Especially, in recent years, with the development of a wide range of sensors, they have developed from contact to non-contact methods. However, developers' senseless definitions of the interaction methods have made the exploration process quite complicated, which rather creates the hassle of users needing to learn the interaction guide defined by the developers before experiencing the exhibition contents. In this context, in order to make visitors smoothly communicate with exhibition contents, a preliminary study on easy interaction for users of various ages is needed, and in particular, research on improving the usability of user interaction is also essential when developing non-contact exhibition contents. So, in this study, a method to reduce the confusion between developers and users was sought by researching non-contact interaction that could be universally interacted with in the field of exhibition contents and proposing behavior designs. First, based on the narrative structure of cultural resources, existing studies were reviewed and the points of interactions as cultural contents were derived. Then the most efficient search process was selected among non-contact behaviors based on hand gestures that allow users to naturally guess and learn interaction methods. Furthermore, on the basis of the meaning of non-linear narrative-based interaction and the analysis results of spatial behavior elements, affordance behavior with high learning effect and efficiency was derived. Through this research process, an action that helps users to understand non-contact interaction naturally in the process of exploring exhibition-type cultural contents and to utilize non-contact interaction in the process of immersion in exhibition contents is proposed as a final model.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2010.11a
• /
• pp.824-826
• /
• 2010

컴퓨터의 활용도가 높아지면서 자연스럽게 컴퓨터에 따른 입력 장치도 사용이 잦아지고 있는 추세이다. 본 논문에서 다루고 있는 핸드 트랙킹 인터랙션 시스템(Hand-Tracking Interaction System)이란 캠에 사람의 손을 인식시켜 손의 모션에 기능을 부여하는 또 다른 차세대 입력 장치이다. 본 논문에서는 현재 사용하고 있는 마우스와 키보드 같은 입력 장치의 공간 제약성 이라는 단점을 보완하기 위해 핸드 트랙킹 인터랙션 시스템 (Hand-Tracking Interaction System) 을 개발하였고, 빛과 그림자의 영향을 쉽게 받아 손 인식률이 낮아지는 단점을 해결하기 위해 캠 대신 적외선카메라를 이용하여 인식률을 높임에 힘썼다. 또 핸드 트랙킹 인터랙션 시스템을 효율적으로 사용할 수 있는 새로운 어플리케이션을 함께 개발하였다.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 2009.11a
• /
• pp.66-69
• /
• 2009

본 연구는 사용자에게 편리하고 자연스러운 인터페이스를 제공하는 직관적 제스쳐 인터랙션의 요소 추출에 대해 분석하였다. 대학생 30명을 대상으로 마우스와 키보드의 8가지 기본 인터랙션 요소를 제시하여 그 요소와 적합한 의미의 어휘를 선택하도록 설문을 실시하였다. 다음으로 선택한 어휘가 가지는 의미를 표현한 제스쳐를 빈도수에 따라 최종 선정한 후 검증을 실시하였다. 첫 번째 설문시 마우스의 상하좌우 이동과 ESC의 의미는 30명 전원이 상하좌우 이동과 취소라는 동일한 의미를 선택하였다. 마우스의 좌클릭은 30명 중 28명이 선택, 우클릭은 26명이 설정 탐색, 키보드 엔터의 경우 25명이 실행이라는 의미를 선택하였다. 최종 선정된 제스쳐의 검증 결과 상하좌우 이동과 취소 요소로 제시했던 손전체 상하좌우 이동과 손전체X는 70~100%의 높은 결과가 도출되었으며, 선택 요소로 제시했던 정지상태 검지손 아래는 60%의 결과가 도출되었다. 설정 탐색을 위해 제시되었던 손전체 회전과 중지손 클릭 중 손전체 회전이 60%의 결과를 도출하였으며, 중지손 클릭은 선택과 하단 이동이 73%로 설정 탐색의 요소로는 적합하지 않은 것으로 도출되었다. 실행 요소로 제시했던 손전체 두번 클릭은 27%의 낮은 검증 결과가 도출되어 적합하지 않은 것으로 제시되었다.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.1011-1018
• /
• 2006

멀티모달 인터페이스는 인간의 제스처, 시선, 손의 움직임, 행동의 패턴, 음성, 물리적인 위치 등 인간의 자연스러운 행동들에 대한 정보를 해석하고 부호화하는 인지기반 기술이다. 본 논문에서는 제스처와 음성, 터치를 이용한 3D 오브젝트 기반의 멀티모달 인터페이스를 설계, 구현한다. 서비스 도메인은 스마트 홈이며 사용자는 3D 오브젝트 직접조작을 통해 원격으로 가정의 오브젝트들을 모니터링하고 제어할 수 있다. 멀티모달 인터랙션 입출력 과정에서는 여러 개의 모달리티를 병렬적으로 인지하고 처리해야 하기 때문에 입출력 과정에서 각 모달리티의 조합과 부호화 방법, 입출력 형식 등이 문제시된다. 본 연구에서는 모달리티들의 특징과 인간의 인지구조 분석을 바탕으로 제스처, 음성, 터치 모달리티 간의 입력조합방식을 제시하고 멀티모달을 이용한 효율적인 3D Object 인터랙션 프로토타입을 설계한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2013.06a
• /
• pp.313-314
• /
• 2013

최근 TV 와 같은 디스플레이들은 비접촉식 인터랙션에 의해 제어되는 방법을 많이 사용하고 있다. 이를 위한 다양한 방법들 중에서 풀 비전 기반 인터랙션 방법이 사용자에게 가장 자연스러운 접근을 유도한다. 본 논문에서는 이러한 풀 비전 기반 방법으로 같은 시점의 컬러 영상과 적외선 영상을 이용하여 사용자를 인식하고 손 동작을 이용하여 TV 를 제어하는 어플리케이션을 보인다. 이를 위해 적외선 영상과 거리의 관계를 도출하여 어플리케이션에 적용하고 제스쳐 기반으로 TV 를 제어하였다.

• 한국HCI학회:학술대회논문집
• /
• 2006.02b
• /
• pp.290-295
• /
• 2006

지금까지 디지털 기기의 진화 과정을 볼 때 오직 기능적 발전만이 추구되고 그것을 사용하는 사용방식에 대한 진지한 고민은 부재하였다. 때문에 디지털 기기가 갖고 있는 버튼 위주의 획일적 사용방식은 사용자보다는 기기 중심의 디자인이 우선시되는 사회적 병리현상을 야기하고 있다. 반면 오랜 기간 인간이 다루어 온 전통적인 아날로그 도구들은 작업의 특성과 작업자의 상황에 맞도록 다양한 사용성을 고려하며 진화되어 왔다. 따라서 본 연구에서는 사용자들에게 익숙한 아날로그적 경험을 디지털 기기의 인터랙션 디자인에 적용시켜 보다 인간 중심적인 디지털 도구를 제안 하고자 한다. 연구의 목표는 다양한 기능이 복합된 대표적 디지털 기기인 휴대폰에 아날로그 경험을 접목시킴으로써 전통적인 도구들과 같이 디지털 기기의 자연스러운 인터랙션 스타일을 디자인하는 것이다. 이를 위하여 한정된 디바이스로 다양한 기능들을 조작해야 하는 모바일 기기에 적합한 아날로그 경험들에 대한 연구가 진행되었고, 기호와 조합으로 이루어진 카드놀이 메타포에서 그 단서를 발견할 수 있었다. 따라서 본 연구는 메타포로 제시한 카드놀이를 하며 일어나는 행위와 경험을 멀티미디어 휴대폰에 접목시켜 새로운 사용 방식을 제안하는 것이다. 예를 들어, 메뉴 선택의 경우 카드를 펼쳐 원하는 카드를 뽑으면 되는데 아래로 펼치면 그 카드의 수직 메뉴가, 옆으로 펼치면 그 카드의 수평 메뉴가 나타난다. 또 메뉴 안의 내용을 찾을 때는 카드를 뒤로 넘겨서 보게 되고 자신만의 개인적인 내용을 보고자 할 때는 카드를 은밀히 보는 듯한 행위를 취하면 된다. 즉 멀티미디어 폰 안의 내용뿐 아니라 사용하는 행위 자체도 하나의 즐거움이 되도록 카드놀이 경험을 새로운 인터랙션 스타일로 개발하여 그 가능성을 연구하였다.