• 한국콘텐츠학회:학술대회논문집
• /
• 한국콘텐츠학회 2011년도 춘계 종합학술대회 논문집
• /
• pp.505-506
• /
• 2011

21세기 초까지 멀티터치 시스템은 많은 연구와 성능 향상에도 불구하고 대중적인 인기를 얻지 못하였다. 그러나 2007년 아이폰의 등장으로 멀티터치 인터페이스는 각광을 받기 시작하고 NUI(Natural User Interface)에 대한 관심도 폭발적으로 증가하였다. 2010년 전체 모바일 시장에서 스마트폰이 차지하는 비중은 약20% 수준이지만 그 성장 곡선은 가파르게 상승하고 있다. 본 논문에서는 NUI의 사용이 스마트폰 혹은 멀티터치 모니터에 치우친 경향을 가만하여 원격 멀티터치 인터페이스 시스템을 제안한다.

• 대한인간공학회지
• /
• 제31권4호
• /
• pp.585-591
• /
• 2012

Objective: The aim of this study is to propose the contactless gesture-based interface on smart mobile devices for especially rhythm action games. Background: Most existing approaches about interactions of smart mobile games are tab on the touch screen. However that way is such undesirable for someone or for sometimes, because of the disabled person, or the inconvenience that users need to touch/tab specific devices. Moreover more importantly, new interaction can derive new possibilities from stranded game genre. Method: In this paper, I present a smart mobile game with contactless gesture-based interaction and the interfaces using computer vision technology. Discovering the gestures which are easy to recognize and research of interaction system that fits to game on smart mobile device are conducted as previous studies. A combination between augmented reality technique and contactless gesture interaction is also tried. Results: The rhythm game allows a user to interact with smart mobile devices using hand gestures, without touching or tabbing the screen. Moreover users can feel fun in the game as other games. Conclusion: Evaluation results show that users make low failure numbers, and the game is able to recognize gestures with quite high precision in real time. Therefore the contactless gesture-based interaction has potentials to smart mobile game. Application: The results are applied to the commercial game application.

• 전기학회논문지
• /
• 제63권4호
• /
• pp.565-569
• /
• 2014

Recently, various kinds of new computer controlled devices have been introduced in a wide range of areas, and convenient user interfaces for controlling the devices are strongly needed. To implement natural user interfaces(NUIs) on top of the devices, new technologies like a touch screen, Wii Remote, wearable interfaces, and Microsoft Kinect were presented. This paper presents a natural and intuitive gesture-based model for controlling contents of LCD display. Microsoft Kinect sensor and its SDK are used to recognize human gestures, and the gestures are interpreted into corresponding commands to be executed. A command dispatch model is also proposed in order to handle the commands more naturally. I expect the proposed interface can be used in various fields, including display contents control.

• 한국콘텐츠학회논문지
• /
• 제10권2호
• /
• pp.43-53
• /
• 2010

유비쿼터스 컴퓨팅 기술들의 발달로 인해 인터랙티브 디스플레이는 사용자에게 다양한 인터랙션을 제공하고 있다. 이러한 인터랙션을 위해 다양한 방법들이 연구되었지만 디바이스 사용성과 단일 사용자에게 제공된다는 한계점이 발생하였다. 따라서 본 논문에서는 앰비언트 디스플레이 환경에서 다수 사용자에게 다양한 인터랙션을 제공하기위한 공간 멀티 인터랙션 인터페이스를 제안한다. 이를 위해 적외선 LED 배열바(IR-LEDs Array Bar)를 통해 사용자가 인터랙션 할 수 있도록 인터랙션 막을 생성한다. 이때 사용자는 인터랙션 막에서 공간 터치를 통해 다양한 인터랙션을 경험할 수 있다. 따라서 휴대 디바이스 없이도 사용자의 자연스러운 손동작만으로 인터랙션을 할 수 있는 인터랙티브 디스플레이 시스템과 인터페이스 방법을 제공한다.

• 대한인간공학회지
• /
• 제29권4호
• /
• pp.655-659
• /
• 2010

The objective of this study is to quantitatively incorporate user observation into usability evaluation of mobile interfaces using monitoring techniques in first- and third-person points of view. In this study, an experiment was conducted to monitor and record users' behavior using Ergoneers Dikablis, a gaze tracking device. The experiment was done with 2 mobile phones each with a button keypad interface and a touchscreen interface for comparative analysis. The subjects included 20 people who have similar experiences and proficiency in using mobile devices. Data from video recordings were coded with Noldus Observer XT to find usage patterns and to gather quantitative data for analysis in terms of effectiveness, efficiency and satisfaction. Results showed that the button keypad interface was generally better than the touchcreen interface. The movements of the fingers and gaze were much simpler when performing given tasks on the button keypad interface. While previous studies have mostly evaluated usability with performance measures by only looking at task results, this study can be expected to contribute by suggesting a method in which the behavioral patterns of interaction is evaluated.

• 한국컴퓨터정보학회논문지
• /
• 제21권1호
• /
• pp.101-105
• /
• 2016

After a weight-rate disposal system for food waste has been implemented we have to install the food waste system at all apartment. In this paper, we supplied electric energy to the food waste system using solar heat panels. The weight of the food waste is displayed on the LCD panel, and its price is calculated based on its weight. Since there would be some cases that touch-typed card can't be well recognized if it is contaminated by foreign material, we designed a recognition device by no-touch sensitive card reader to embody the food waste system. The food waste system was designed using a GUI(graphical user interface) so that users can easily understand it.

• 한국인터넷방송통신학회논문지
• /
• 제12권2호
• /
• pp.85-94
• /
• 2012

본 논문에서는 FTIR 멀티터치 테이블에서 손가락을 이용하여 기존에 윈도우에서 제공되는 제스처 외에 간편한 방법으로 화면 제어를 할 수 있는 제스처를 개발하였다. 또한, 손가락을 사용하지 않고 적외선 카메라 제어를 통해 모바일 기기를 올려놓아도 인식할 수 있도록 구현하였다. HID 인터페이스가 제공되지 않는 FTIR 멀티터치 테이블의 환경 때문에 기존 블루투스는 연결이 어려웠으나, 본 논문에서 제안한 모바일 기기를 이용한 데이터 전송 방법은 인터페이스의 불편함을 해소하고 데이터 전송을 효과적으로 진행 할 수 있도록 구현하였다. 기존 블루투스 연결은 복잡한 페어링 과정을 지니지만, 본 연구에서는 페어링 과정을 단순화하고, 사용자가 친화적 제스처를 개발하여 특정 기기 연결을 가능토록 구현하였다. 또한, 자체 제작한 FTIR 멀티터치 테이블에서 테스트를 통해 검증하였다.

• 한국인터넷방송통신학회논문지
• /
• 제15권2호
• /
• pp.167-173
• /
• 2015

손-동작(Hand-Gesture) 인터페이스 기술에서 사용자의 다중 입력을 위하여 손가락 끝점(Finger end-points)의 추출은 가장 중요한 과정 가운데 하나이다. 그러나 이전의 방법들은 손 영역을 추출하고 기하학적 또는 형태학적 영상 처리 방법에 기반하여 손-동작 명령 수행을 위한 손가락 끝점 추출을 수행하고 있다. 따라서 본 논문에서는 멀티터치(Multi-Touch) 디스플레이 장치에서 사용자 입력 처리를 위해서 사용되는 적외선 확산 투광(DI: Diffused illumination) 방식을 이용하여 사용자 손가락 끝점을 추출하고, 추출된 끝점의 개수 변화 및 이동 방향에 의해서 동작하는 공간 마우스를 구현한다. 제안하는 공간 마우스는 기본적인 마우스 이벤트 처리뿐만 아니라, 확장된 사용자 멀티 제스쳐를 위한 연속적 명령 기능을 포함한다. 구현된 공간 마우스의 성능 평가를 위해서 윈도우 웹 브라우져 어플리케이션 사용 환경에 적용한 결과 다양한 사용자 명령에 대하여 평균 90%의 성공적 결과를 보였다.

• 한국멀티미디어학회논문지
• /
• 제12권10호
• /
• pp.1363-1373
• /
• 2009

유비쿼터스 컴퓨팅 환경으로 변화됨에 따라 사람들은 점점 더 많은 디스플레이를 이용하게 된다. 이러한 유비쿼터스 디스플레이 환경에서는 사용자가 컨텐츠에 대해서 디스플레이들과 지속적으로 인터랙션 할 수 있는 방법이 필요하다. 본 논문에서는 사용자가 여러 디스플레이를 오가며 사진을 감상할 수 있도록 연속성을 갖는 인터페이스를 제안한다. 제안 시스템은 3차원 공간상에서 사진을 보여주기 때문에 많은 수의 사진을 한 화면에 동시에 보여줄 수 있고, 큐브 메타포를 사용하여 여러 장의 사진을 그룹화 한다. 사용자는 터치스크린을 이용하여 사진을 직접 조작할 수 있으며, 다른 장소로 이동시에도 휴대하고 있는 PDA를 통해 컨텐츠를 지속적으로 이용할 수 있다. 또한 다른 디스플레이를 통해 연속적으로 인터랙션을 할 수 있다. 개발된 시스템은 사용자의 묵시적인 움직임에 따라 반응하면서도 주의를 지나치게 집중시키지 않는 앰비언트 디스플레이 형태로 설계되었다. RFID 센서와 초음파 센서를 이용하여 사용자 신인 및 디스플레이와의 접근거리를 인식하고, 사용자와 디스플레이의 근접도에 따라 보여 질 영상과 인터페이스를 파동으로 결정하게 된다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제27권5호
• /
• pp.81-89
• /
• 2021

본 연구는 모바일 플랫폼 환경에서 언어 기반의 교육 콘텐츠 지원을 위한 텍스트 인터페이스를 제안한다. 이는 손 글씨를 통해 단어를 작성하는 입력 구조로 딥 러닝을 활용한다. 모바일 플랫폼 콘텐츠의 버튼, 메뉴 등을 활용한 GUI (Graphical User Interface)와 화면 터치, 클릭, 드래그 등의 입력 방식을 기반으로 손 글씨를 사용자로부터 직접 입력하여 처리할 수 있는 텍스트 인터페이스를 설계한다. 이는 EMNIST (Extended Modified National Institute of Standards and Technology database) 데이터 셋과 훈련된 CNN (Convolutional Neural Network)을 사용하여 알파벳 텍스트를 분류하고 조합하여 단어를 완성한다. 최종적으로 영어 단어 교육 콘텐츠를 직접 제작하여 제안하는 인터페이스의 학습 지원 효과를 분석하고 만족도를 비교하기 위한 실험을 진행한다. 동일한 교육 환경에서 기존의 키 패드 방식의 인터페이스와 제안하는 손 글씨 기반 텍스트 인터페이스를 서로 체험한 사용자들이 제시하는 영어 단어를 학습하는 능력을 비교하고, 인터페이스를 조작하여 단어를 작성하는 과정에서의 전체적인 만족도를 분석, 확인하도록 한다.