촉각 기반 윈도우 인터페이스

Manipulation of the Windows Interface Based on Haptic Feedback

본 논문에서는 터치스크린이 장착된 윈도우 시스템에서 촉각 피드백을 사용해 윈도우 인터페이스와 상호작용하는 방법 및 체계를 제안한다. 사용자가 터치 스크린을 통해 윈도우 인터페이스와 상호작용할 때 발생하는 주요 이벤트는 윈도우 인터페이스 메시지 필터(Windows Interface Message Filter: WIMF)에 의해 감지되고, 촉각 정보 제공기(Haptic Information Provider: HIP)를 통해 적절한 촉각 정보로 변환되어 본 연구에서 제안한 스타일러스형 햅틱 인터페이스를 통해 사용자에게 촉각 자극을 전달한다. 본 연구에서는 윈도우 환경의 주요한 조작 방법인 버튼 클릭, 메뉴 선택 및 팝업, 창/아이콘 선택 및 끌어놓기(drag & drop), 스크롤에 대하여 촉각 피드백을 구현하였다. 피험자 실험결과 촉각 피드백은 상호작용하는 인터페이스 객체가 선택되었는지에 대한 사용자의 직관을 증대시켰으며, 인터페이스 객체의 위치 및 크기 조절 시 인터페이스의 정교한 조작을 도와 사용성을 증대시켰다.

In this paper, we suggest a haptic interface and a framework of interaction with haptic feedback based Windows graphical user interface (GUI) in a computing device with touch screen. The events that occur during a user interacts with Windows interfaces through a touch screen are filtered out by the Windows Interface Message Filter (WIMF) and converted into appropriate haptic feedback information by the Haptic Information Provider (HIP). The haptic information are conveyed to users through a stylus-like haptic interface interacting with a touch screen. Major Windows interaction schemes including button click, menu selection/pop-up, window selection/movement, icon selection/drag & drop and scroll have been implemented and user tests show the improved usability since the haptic feedback helps intuition and precise manipulation.