Abstract
Focused on the fact that sound is one of the important sensory cues delivering situations such as impact, this paper proposes an auditory interaction design approach for virtual environment. Based on a few sampling of basic material sound for various materials such as steel, rubber, and glass, the proposed method enables design transformations of the basic sound by allowing modification of mode gains that characterize natural sound for the material. In real-time virtual environment, it also provides simulation of modified sound according to the change of impact situation's perceptual properties such as colliding objects' size, hardness, contacting area, and speed. The test results on cognition experiment for discriminating objects' materials and impact situation by sound showed the feasibility of proposed auditory interaction design method.
본 논문에서는 객체 간 충돌음과 같이 가상환경의 발생 상황을 전달할 수 있는 중요한 감각 채널 중 하나인 소리를 통해 청각적 인터랙션을 디자인할 수 있는 방법을 제시하였다. 철, 고무, 유리 등 물질별 기본음 샘플에 대해 각각의 고유음을 특징짓는 모드 게인 값의 스케일 변경을 허용함으로써 디자인적 변형이 가능하도록 하고, 충돌 상황에 대한 인지적 속성인 충돌체의 크기, 딱딱한 정도, 접촉면적, 충돌 속도 차이에 의한 충돌음의 변화를 실시간에 재현할 수 있게 하는 계산적 알고리즘을 사용한 방법이다. 소리를 통한 충돌물체의 물질 및 충돌 상황 인지 실험을 통해 제안된 방법이 가상환경 청각적 인터랙션 디자인에 사용될 수 있음을 보였다.