• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2006년도 학술대회 1부
• /
• pp.1011-1018
• /
• 2006

멀티모달 인터페이스는 인간의 제스처, 시선, 손의 움직임, 행동의 패턴, 음성, 물리적인 위치 등 인간의 자연스러운 행동들에 대한 정보를 해석하고 부호화하는 인지기반 기술이다. 본 논문에서는 제스처와 음성, 터치를 이용한 3D 오브젝트 기반의 멀티모달 인터페이스를 설계, 구현한다. 서비스 도메인은 스마트 홈이며 사용자는 3D 오브젝트 직접조작을 통해 원격으로 가정의 오브젝트들을 모니터링하고 제어할 수 있다. 멀티모달 인터랙션 입출력 과정에서는 여러 개의 모달리티를 병렬적으로 인지하고 처리해야 하기 때문에 입출력 과정에서 각 모달리티의 조합과 부호화 방법, 입출력 형식 등이 문제시된다. 본 연구에서는 모달리티들의 특징과 인간의 인지구조 분석을 바탕으로 제스처, 음성, 터치 모달리티 간의 입력조합방식을 제시하고 멀티모달을 이용한 효율적인 3D Object 인터랙션 프로토타입을 설계한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.690-695
• /
• 2009

본 논문은 영화, 방송, 애니메이션 등의 다양한 동영상 콘텐츠에 수화 애니메이션을 합성하여 동영상 콘텐츠를 청각 및 언어장애인들에게 이해시키기 위한 수화 통역 VR 콘텐츠 시스템을 제안하고자 한다. 제안된 시스템은 수화 사전에 있는 수화들을 3D 애니메이션으로 DB화하기 위해, 모션 캡처 시스템과 데이터 글러브를 사용하여 실제 사람처럼 자연스러운 애니메이션을 생성하였다. 최종적으로 동영상 콘텐츠의 자막이나 대본의 구문분석을 한 후, 이를 수화용 단어자막을 통해 수화 애니메이션을 DB에서 검색한 후, 실시간적으로 기존 동영상 콘텐츠와 동기합성을 하여 수화 통역 콘텐츠를 제공하는 VR 콘텐츠 시스템을 구현하였고 이 시스템을 동화용 애니메이션에 적용하였다.

• 한국정밀공학회:학술대회논문집
• /
• 한국정밀공학회 2001년도 춘계학술대회 논문집
• /
• pp.211-216
• /
• 2001

Recently, the research for the mobile computing such as PDA, Palm PC and wearable computing related technologies is widely under development, specially for the input device. Among the mobile input methods are speech recognition, handwriting recognition and cording type. However these systems have the problems of the data input appraratus like input speed and recognition rate. This paper presents the Glove-based input device which could solve the system's data input problem. By the experimental results suggest the method of proposional input method that utilize the hand's movement is appropriate for the effective mobile input devices.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.62-67
• /
• 2009

기존의 증강현실 기반 상호작용 기법은 상호작용 주체의 원활한 추적을 위해 마커 기반의 패들이나 데이터 글러브 등의 부가적인 입력장치에 의존하거나 제한적인 3차원 입력만을 허용하는 경우가 많았다. 본 논문에서는 대상 개체 주변 공간의 물리적 점유를 감지하여 사용자의 입력을 해석하는 비접촉식 수동형 공간 상호작용 기법을 제안한다. 제안된 방법은 깊이 카메라로 구성한 증강현실 환경에 가상의 공간 센서를 배치하여 사용자의 입력을 공간적으로 해석한다. 그 결과, 부가적인 입력장치의 착용이 필요하지 않으며, 입력 형태에 대한 제약을 최소화하고, 증강된 영상 내의 상호작용 객체 간에 정확한 거리감을 제시한다. 향후 이러한 기법은 미니어쳐 AR 시스템과 같은 동적 콘텐츠 전시 플랫폼의 인터페이스에 적용될 것으로 기대된다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제10권2호
• /
• pp.1-9
• /
• 2004

본 논문에서는 바이러스와 같은 생화학 물질의 분자구조를 3 차원 모델로 시각화하여 관찰하고, 그 분자모델을 직관적인 방법으로 조작하기 위한 가상 현실 분자 모델링 시스템을 제안한다. 이 시스템을 사용하면, 입체영상 디스플레이 장치와 데이터 글러브 및 동작 추적 장치를 사용하여 3 차원 분자 모델을 실감나게 조작할 수 있어서 효율적으로 분자들을 관찰하고 결합, 분리하는 등의 분자 모델링 작업이 가능하다. 사용자들은 마우스나 키보드 등의 장비 대신에 자연스러운 몸 동작이나 손 동작을 이용하여 분자 모델링 작업을 위한 동작을 하게 된다. 분자들의 결합을 화학적으로 정확하게, 그리고 실시간으로 시뮬레이션 하기 위해서 에너지 계산 알고리즘을 구현하였으며 이러한 작업이 가능하도록 분자 구조를 표현하는 새로운 자료구조를 제안하였다. 본 연구에서 제안하는 동작 기반의 VR 분자 모델링 시스템의 타당성을 검증하기 위하여 HIV 바이러스 분자를 가지고 분자 모델링 작업을 수행하였고, 사용자 테스트를 실시하여 기존의 방식과 작업 성능 및 사용자 만족도를 비교하였다.

• 스마트미디어저널
• /
• 제1권3호
• /
• pp.8-14
• /
• 2012

본 논문에서는 청각장애인(농아인)과 비장애인의 수화 학습의 기회를 넓히고자 스마트폰용 3D 수화교육 앱을 개발하였다. 특히 한국어 문장을 자동으로 수화구조로 변환하는 수화단어 변환 알고리즘을 제안하였다. 또한, 자연스러운 수화 동작을 얻기위해 모션 캡처 시스템과 정확한 손동작 표현을 위해 데이터 글러브를 이용하여 실제 사람과 같은 3D 수화 애니메이션 DB를 구축하였다. 마지막으로 수화 애니메이션의 움직임을 실시간 3D 렌더링하여 화면에 보여주기 위해 UNITY 3D 엔진 프로그래밍이 이용되었다. 제안한 수화교육 앱 콘텐츠는 아이폰 앱스토어와 안드로이드 앱스토어에 약 1,300단어의 3D 수화 DB를 가지는 앱으로 배포 중이다.

• 로봇학회논문지
• /
• 제15권3호
• /
• pp.240-247
• /
• 2020

This paper presents a novel knitted data glove system for pattern classification of hand posture. Several experiments were conducted to confirm the performance of the knitted data glove. To find better sensor materials, the knitted data glove was fabricated with stainless-steel yarn and silver-plated yarn as representative conductive yarns, respectively. The result showed that the signal of the knitted data glove made of silver-plated yarn was more stable than that of stainless-steel yarn according as the measurement distance becomes longer. Also, the pattern classification was conducted for the performance verification of the data glove knitted using the silver-plated yarn. The average classification reached at 100% except for the pointing finger posture, and the overall classification accuracy of the knitted data glove was 98.3%. With these results, we expect that the knitted data glove is applied to various robot fields including the human-machine interface.

• 한국콘텐츠학회:학술대회논문집
• /
• 한국콘텐츠학회 2009년도 춘계 종합학술대회 논문집
• /
• pp.765-769
• /
• 2009

기존의 증강현실은 객체와 배경과의 원활한 상호작용을 위하여 데이터 글러브나 마커 등을 이용하였다. 이는 사용에 불편함과 몰입감 저하의 결과를 발생한다. 증강현실에서 몰입감을 강화하기 위해서는 부가적인 입력장치의 제거가 필요하다. 이를 위해 마커가 부착되지 않은 상태에서도 정확한 공간좌표의 인식을 필요로 한다. 본 논문에서는 증강현실에서의 몰입감 향상을 위해 부가적인 입력장치의 착용없이 상호 작용을 하기 위한 가상의 공간좌표 생성 기법을 제안한다. 제안된 방법은 획득한 영상을 2차원 공간상에 투영하고 특징선을 추출하여 투영된 가상공간좌표를 계산하여 가상의 객체를 투영하였다. 이는 Markerless 증강과 모바일 증강 등에 응용이 가능하다.

• 전자공학회논문지CI
• /
• 제43권4호
• /
• pp.103-112
• /
• 2006

본 논문에서는 방대한 계산량으로 인해 슈퍼컴퓨터나 특수하게 제작된 컴퓨팅 시스템에서만 수행될 수 있었던 기존의 볼입 형 가상 환경(IVE) 시스템과는 달리 확장성과 호환성을 갖는 PC 기반의 몰입 형 가상 환경 시스템(PIVE)을 제안한다. 이러한 개인용 혹은 가정용 컴퓨터 기반의 어플리케이션은 두 가지 장점을 가진다. 첫 번째로 사용할 수 있는 리소스가 다양하다는 것이고, 두 번째로 사용자에게 친근한 인터페이스를 갖는다는 것이다. PC 기반의 몰입 형 가상 환경 시스템은 단순한 인터페이스와 호환성으로 일반 사용자가 IVE 시스템에 쉽고 편리하게 접근할 수 있게 해 준다. 또한 PC 기반의 몰입 형 가상 환경 시스템은 다양한 사용자로 하여금 많은 종류의 주제를 다룰 수 있게 하며, 기존의 복잡한 구조로 되어 있는 햄틱 장치를 PC 기반으로 제작하여 PC와의 호환성을 높여 인터페이스를 보다 쉽게 구현할 수 있게 해준다. 또한 제안된 PC 기반의 몰입 형 가상 환경 시스템은 물리적인 현상들을 계산하고, 시각화하는 시간을 단축시키기 위해서 기하학적인 방법들이 적용함으로써 일반 보급형 PC에서도 구현이 용이하다. 본 논문에서 제안된 PC 기반의 몰입 형 가상 환경 시스템을 사용자가 실내 환경에서 데이터 글러브와 행동 인식 장치, HMD를 착용하고 움직이는 예제에 적용해 보았다.

• 한국정보통신학회:학술대회논문집
• /
• 한국해양정보통신학회 2010년도 춘계학술대회
• /
• pp.676-678
• /
• 2010

기존 증강현실은 객체와 배경과의 원활한 상호작용을 위하여 데이터 글러브나 마커 등을 이용하였다. 이는 사용에 불편함과 몰입감 저하가 발생했다. 증강현실에서 몰입감을 강화하기 위해서는 부가적인 입력장치의 제거가 필요하다. 본 논문에서는 증강현실에서의 몰입감 향상을 위해 부가적인 입력장치의 착용없이 상호작용을 하기 위한 가상의 공간좌표 생성 기법을 제안한다. 획득한 영상을 2차원 공간상에 투영하고 소실선을 추출하여 투영된 가상공간좌표를 계산하여 2차원 좌표상에 투영하였다. 이러한 방법은 3차원 객체를 생성하기 위해 3D 모델러의 사용을 배제함으로써 객체 생성의 효율성을 증대할 수 있다.