• 대한산업공학회지
• /
• 제22권2호
• /
• pp.265-276
• /
• 1996

Multimedia systems present information by various media, for example, video, sound, music, animation, movie, etc., in addition to the text which has long been used for conveying the information. Among many multimedia applications, the multimedia information retrieval systems commercialized in the forms of multimedia encyclopedia CD-ROMs, benefited from various media for their ability to present information in an efficient and complete way. But using several media, on the other hand, may cause end users' confusion and furthermore, poorly designed user interface often exacerbates the situation. In this study, the multimedia systems were studied from the standpoint of usability. The conceptual framework of the user interface of the multimedia system was newly defined. And 100 initial variables for user interface design of general multimedia systems were suggested through literature survey and expert opinions based upon the framework developed. Among various application areas, the multimedia information retrieval systems were chosen for investigation, and 36 variables particularly relevant to user interface of the multimedia information retrieval systems were selected. According to the sequential research strategy, the variables that were considered to be most important were finally selected through a screening stage. A part of selected variables were verified through a human factors experiment as the first step of sequential research. Based upon the result of the experiment, guidelines for user interface design were provided. For future study, the variables remained will be Investigated and the study will expand to another application areas.

• 디지털콘텐츠학회 논문지
• /
• 제18권8호
• /
• pp.1615-1620
• /
• 2017

VR 관련 기술들의 발달로 인하여 VR 기기의 성능이 좋아지고 보급화가 가능한 가격이 되면서 많은 사람들이 VR 기술을 쉽게 접할 수 있게 되었다. VR 드로잉 어플리케이션은 사용자에게 복잡하지 않으며 완성도가 높은 어플리케이션으로 교육 및 공연 등에 사용되고 있다. 컨트롤러를 사용하여 공간 드로잉 하는 인터페이스 방식은 사용자의 드로잉 인터페이스가 컨트롤러에 제약적이 된다. 본 연구에서는 HMD 전면부에 Leap Motion을 부착하여 HMD 전면부에서 움직이는 사용자의 손을 추적하여 곡면을 그림으로써 컨트롤러를 사용해보지 않은 사용자도 직관적으로 드로잉 어플리케이션을 사용할 수 있는 시스템을 제안하였다.

• 한국콘텐츠학회논문지
• /
• 제10권1호
• /
• pp.138-146
• /
• 2010

쉽고 직관적인 다양한 조작인터페이스를 제공하며 넓은 디스플레이 영역의 확보를 가능하게 하는 장점으로 인해 터치스크린을 탑재한 모바일폰이 활발히 출시되고 있어 최근 모바일게임 개발의 주요한 경향이다. 따라서 기존 키패드 입력에 맞춰져 있는 모바일 게임이 변화되는 입력환경에 적응하고 지속적인 발전을 하기 위해서는 터치스크린 입력환경에 맞춘 모바일게임 터치 사용자 인터페이스(TUI : Touch User Interface)에 대한 연구개발의 필요성이 요구된다. 본 연구는 터치인터페이스기능을 갖춘 휴대용장치(Hand-Hold Device)의 게임인터페이스 적용을 범주로 게임 장르에 적합한 터치인터페이스를 적용하기 위하여 국내외에 출시된 터치 모바일 게임(10종)의 사용성 평가를 바탕으로 터치 모바일 게임 구현하고 기존 게임과 비교분석을 통해 터치게임 인터페이스 적용방법을 구체화하였다. 이는 기존 키패드 입력장치의 한계로 인해 제한되었던 게임 장르의 다양성과 게임성을 상승 시키고 장르별 터치 모바일게임 인터페이스의 기준마련을 위한 기초 자료로 활용될 수 있다는데 의의가 있다.

• Journal of Platform Technology
• /
• 제11권1호
• /
• pp.38-51
• /
• 2023

인공지능에 기반한 손 제스처 인식 정보를 활용한 지능형 인터페이스 알고리즘을 제안한다. 이 방법은 기능적으로 사용자 손 제스처의 추적 및 인식을 미디어파이프와 KNN, LSTM, CNN의 인공지능 기법을 사용해 다양한 동작을 빠르고 지능적으로 인식되는 인터페이스이다. 제안한 알고리즘 성능 평가를 위해 자체 제작한 2D 탑뷰 레이싱 게임과 로봇제어에 적용한다. 알고리즘 적용 결과 게임의 가상 객체의 다양한 움직임을 세밀하고 강건하게 제어할 수 있었으며, 실세계의 로봇 제어에 적용한 결과 이동과 정지, 좌회전, 우회전 등의 제어가 가능하였다. 또한 게임의 메인 캐릭터와 실세계 로봇을 동시에 제어하여 가상과 현실의 공존공간 상황 제어를 위한 지능형 인터페이스로 최적화된 동작도 구현하였다. 제안한 알고리즘은 신체를 활용한 자연스럽고 직관적 특성과 손가락의 미세한 움직임 인식에 따른 정교한 제어가 가능하며, 빠른 기간 내에 숙련되는 장점이 있어 지능형 사용자 인터페이스 개발을 위한 기본자료로 활용될 수 있다.

• 스마트미디어저널
• /
• 제8권3호
• /
• pp.47-52
• /
• 2019

In this paper, we designed HW / SW interfaces for processing the signals of capacitive sensors like Electric Potential Sensor (EPS) to detect the surrounding electric field disturbance as feature signals in motion recognition systems. We implemented a smart light control system with those interfaces. In the system, the on/off switch and brightness adjustment are controlled by hand gestures using the designed and fabricated interface circuits. PWM (Pulse Width Modulation) signals of the controller with a driver IC are used to drive the LED and to control the brightness and on/off operation. Using the hand-gesture signals obtained through EPS sensors and the interface HW/SW, we can not only construct a gesture instructing system but also accomplish the faster recognition speed by developing dedicated interface hardware including control circuitry. Finally, using the proposed hand-gesture recognition and signal processing methods, the light control module was also designed and implemented. The experimental result shows that the smart light control system can control the LED module properly by accurate motion detection and gesture classification.

• 인터넷정보학회논문지
• /
• 제16권6호
• /
• pp.11-21
• /
• 2015

Human-Computer Interaction(HCI)에 대한 관심도가 높이지면서, HCI에 대한 연구도 활발히 진행되고 있다. 이와 더불어 사용자의 몸짓이나 음성을 이용하는 Natural User Interface/Natural User eXperience(NUI/NUX)에 대한 연구도 활발히 진행되고 있다. NUI/NUX의 경우, 제스처 인식이나 음성 인식 등의 인식 알고리즘이 필요하다. 하지만 이러한 인식 알고리즘은 전처리, 정규화, 특징 추출과 같은 단계를 거쳐야하기 때문에 구현이 복잡하고, 트레이닝에 많은 시간을 투자해야 한다는 단점이 있다. 최근에는 NUI/NUX 개발 도구로 Microsoft 사의 Kinect가 개발되어 개발자와 일반인들에게 많은 관심을 받고 있고, 이를 이용한 다양한 연구가 진행 중에 있다. 본 저자들의 이전 연구에서도 사용자의 신체적 특징을 이용하여 뛰어난 직관성을 가진 핸드 마우스를 구현하였다. 하지만 마우스의 움직임이 부자연스럽고 정확도가 낮아 사용자가 사용하기 다소 어려웠다는 단점이 있다. 본 연구에서는 Kinect를 통해 사용자의 신체적 특징을 실시간으로 추출하고, 이를 이용해 가상 모니터라는 새로운 개념을 추가한 핸드 마우스 인터페이스를 설계하고 구현하였다. 가상 모니터는 사용자의 손으로 마우스를 제어할 수 있는 가상의 공간을 의미한다. 이를 통해 가상 모니터 상의 손의 좌표를 실제 모니터 상의 좌표로 정확하게 매핑(mapping)이 가능하다. 가상 모니터를 사용함으로써 이전 연구의 장점인 직관성을 유지하고, 단점인 정확도를 높일 수 있다. 추가적으로 뇌파 집중 지표를 이용해 사용자의 불필요한 행동을 인식하여 핸드 마우스 인터페이스의 정확도를 높였다. 제안하는 핸드 마우스의 직관성과 정확성을 평가하기 위하여 10대부터 50대까지 50명에게 실험을 하였다. 직관성 실험 결과로 84%가 1분 이내에 사용방법을 터득하였다. 또한 동일한 피실험자에게 일반적인 마우스 기능(드래그, 클릭, 더블클릭)에 대해 정확성 실험을 한 결과로 드래그 80.9%, 클릭 80%, 더블 클릭 76.7%의 정확성을 보였다. 실험 결과를 통해 제안하는 핸드 마우스 인터페이스의 직관성과 정확성을 확인하였으며, 미래에 손으로 시스템이나 소프트웨어를 제어하는 인터페이스의 좋은 예시가 될 것으로 기대된다.

• Journal of Computational Design and Engineering
• /
• 제1권1호
• /
• pp.67-77
• /
• 2014

Most engineering software tools use typical menu-based user interfaces, and they may not be suitable for learning tools because the solution processes are hidden and students can only see the results. An educational tool for simple beam analyses is developed using a pen-based user interface with a computer so students can write and sketch by hand. The geometry of beam sections is sketched, and a shape matching technique is used to recognize the sketch. Various beam loads are added by sketching gestures or writing singularity functions. Students sketch the distributions of the loadings by sketching the graphs, and they are automatically checked and the system provides aids in grading the graphs. Students receive interactive graphical feedback for better learning experiences while they are working on solving the problems.

• 한국정보통신학회논문지
• /
• 제15권1호
• /
• pp.89-98
• /
• 2011

본 논문에서는 휴대폰이나 TV 등의 터치화면에 한 번의 터치와 터치된 상태에서의 드래그(drag) 및 방향전환 동작만으로 문자를 용이하게 입력할 수 있고, 다층 구조 메뉴를 신속하고 편리하게 검색 및 선택할 수 있는 새로운 터치 유저 인터페이스 방식을 제안한다. 또한, 터치면의 고정된 위치에 고정된 문자를 할당함으로서 한정된 크기의 터치 면에 여러 문자를 중복할당 할 수 밖에 없는 기존의 절대좌표 방식의 한계성을 극복하기 위하여 터치 위치 이동에 따라 상대좌표를 도출하고 상대좌표에 대응되는 문자를 표시함으로서 한정된 터치영역에서 더 많은 문자를 수용할 수 있는 상대좌표 기반의 문자 할당 및 입력방식을 제안한다. 제안된 방식은 IPTV 플랫폼의 리모컨과 셋톱박스로 구현되어 제안 방식의 실용성과 유효성을 입증한다.

• 한국CDE학회논문집
• /
• 제21권1호
• /
• pp.20-30
• /
• 2016

Recently immersive virtual reality (VR) becomes popular due to the advanced development of I/O interfaces and related SWs for effectively constructing VR environments. In particular, natural and intuitive manipulation of 3D virtual objects is still considered as one of the most important user interaction issues. This paper presents a comparative study on the manipulation and interaction of 3D virtual objects using different interfaces and interactions in three VR environments. The comparative study includes both quantitative and qualitative aspects. Three different experimental setups are 1) typical desktop-based VR using mouse and keyboard, 2) hand gesture-supported desktop VR using a Leap Motion sensor, and 3) immersive VR by wearing an HMD with hand gesture interaction using a Leap Motion sensor. In the desktop VR with hand gestures, the Leap Motion sensor is put on the desk. On the other hand, in the immersive VR, the sensor is mounted on the HMD so that the user can manipulate virtual objects in the front of the HMD. For the quantitative analysis, a task completion time and success rate were measured. Experimental tasks require complex 3D transformation such as simultaneous 3D translation and 3D rotation. For the qualitative analysis, various factors relating to user experience such as ease of use, natural interaction, and stressfulness were evaluated. The qualitative and quantitative analyses show that the immersive VR with the natural hand gesture provides more intuitive and natural interactions, supports fast and effective performance on task completion, but causes stressful condition.

• 한국게임학회 논문지
• /
• 제15권1호
• /
• pp.27-34
• /
• 2015

본 논문은 기존 립모션 장비에 홀로그램과 햅틱 장비를 결합함으로써 향상된 몰입감과 사용 용이성을 제공할 수 있는 사용자 인터페이스를 제시한다. 립모션은 사용자 손동작의 물리적 행동이 직접 가상의 화면상에 영향을 주는 장치인데, 화면상의 가상 손모양을 제어해야 한다는 점과 가상환경에서의 영향을 사용자에게 전달할 수 없다는 한계를 가진다. 우리는 홀로그램을 립모션과 결합시켜 사용자로 하여금 실제 손과 가상 화면을 같은 공간에 배치함으로써 몰입감을 향상시킨다. 아울러 사용자의 손에 촉각을 전달할 수 있는 햅틱 장비를 장착하여 감각의 상호 작용을 실현하는 프로타입을 제시한다.