• 방송공학회논문지
• /
• 제26권5호
• /
• pp.643-651
• /
• 2021

현대인들의 정보습득은 대부분 시각을 통해 이루어진다. 컴퓨터, 스마트폰 등의 스크린은 사람들의 시각을 끊임없이 자극하여 피로감을 증가시킨다. 이러한 사회 현상 속에서 21세기의 최첨단 사운드 시스템의 실감 나고 풍부한 소리는 사람들의 몸과 마음에 다양한 방법으로 영향을 미칠 수 있다. 소리를 통해 인간은 마음을 안정시키고 자신을 관찰할 여지를 제공받게 되는 것이다. 본 논문에서는 ALgruppe와 Rory's PranaLab이 공동으로 실시한 실감음향을 기반으로 한 입체음향요가 수련을 소개하고 실감오디오 시스템에 관한 이해를 도모하고자 하는 목적을 가진다. 실감음향으로 체험하는 입체음향 요가는 단순히 소리의 효과를 누리는 것이 아니라 요가 수련자들이 내면을 들여다보는 자의식을 갖게 하는 강력한 에너지가 됨을 알 수 있었다. 이는 현대사회의 지식의 지평이 요구하는 다학문적 교류에 대한 응답임과 동시에 새로운 문화콘텐츠의 가능성을 알리는 것이다.

• 방송공학회논문지
• /
• 제27권7호
• /
• pp.974-984
• /
• 2022

In this paper, we introduce the minimum and maximum distance setting methods used in geometric distance attenuation processing, which is one of spatial sound reproduction methods. In general, sound attenuation by distance is inversely proportional to distance, that is 1/r law, but when the relative distance between the user and the audio object is very short or long, exceptional processing might be performed by setting the minimum distance or the maximum distance. While MPEG-I Immersive Audio's RM0 uses fixed values for the minimum and maximum distances, this study proposes effective methods for setting the distances considering the signal gain of an audio object. Proposed methods were verified through simulation of the proposed methods and experiments using RM0 renderer.

• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제9권4호
• /
• pp.420-430
• /
• 2003

본 논문에서는 멀티모달(multi-modal) 인터페이스를 통해 지능적 가상검객과 체감형 검도게임을 할 수 있는 시스템을 제안한다. 제안된 검도게임 시스템은 멀티모달 인터페이스(시각과 청각), 인공지능(AI), 피드백(스크린과 사운드) 등 크게 세 가지 모듈로 구성된다. 첫 번째로, 멀티모달 인터페이스는 시각기반, 3차원 인터페이스를 이용하여 사용자가 자유롭게 3차원 공간에서 움직일 수 있도록 하고, 음성기반 인터페이스를 이용하여 사용자가 현실감 있는 검도게임을 즐길 수 있도록 한다. 두 번째, 인공지능은 가상검객에게 멀티모달 인터페이스에서 입력되는 시각과 음성을 인식하여 가상검객의 반응을 유도한다. 마지막으로, 대형 스크린과 스피커를 통한 시청각 피드백은 체감형 상호작용을 통하여 사용자가 몰입감을 느끼며 검도게임을 경험할 수 있도록 한다. 따라서 제안된 시스템은 전신의 움직임으로 사용자에게 몰입감의 검도게임을 제공한다. 제안된 시스템은 오락 외에 교육, 운동, 예술행위 등 다양한 분야에 적용될 수 있다.

• 방송과미디어
• /
• 제19권1호
• /
• pp.22-30
• /
• 2014

• International Journal of Advanced Culture Technology
• /
• 제9권4호
• /
• pp.194-203
• /
• 2021

Virtual reality is being increasingly used for healing and therapy for mental health. In this study, we developed VR-based immersive content that enables virtual travel without the limitations of time and physical conditions. We aim to develop and produce VR content for relaxation and meditation using the beautiful natural scenery. To make realistic and immersive content, we took a video of natural sceneries with a small UAV connected to a VR camera. The content was developed through stitching, video editing and post-processing of the initially captured video data, and then the created VR video was inserted into the VR device. The produced content will be helpful for stress and used to heal the mind and body of exhausted modern people by providing the place with great scenery and sound in an immersive way at any time.

• International Journal of Internet, Broadcasting and Communication
• /
• 제13권1호
• /
• pp.161-167
• /
• 2021

This paper proposes a new personalized HRTF estimation method which is based on a deep neural network (DNN) model and improved elevation reproduction using a notch filter. In the previous study, a DNN model was proposed that estimates the magnitude of HRTF by using anthropometric measurements [1]. However, since this method uses zero-phase without estimating the phase, it causes the internalization (i.e., the inside-the-head localization) of sound when listening the spatial sound. We devise a method to estimate both the magnitude and phase of HRTF based on the DNN model. Personalized HRIR was estimated using the anthropometric measurements including detailed data of the head, torso, shoulders and ears as inputs for the DNN model. After that, the estimated HRIR was filtered with an appropriate notch filter to improve elevation reproduction. In order to evaluate the performance, both of the objective and subjective evaluations are conducted. For the objective evaluation, the root mean square error (RMSE) and the log spectral distance (LSD) between the reference HRTF and the estimated HRTF are measured. For subjective evaluation, the MUSHRA test and preference test are conducted. As a result, the proposed method can make listeners experience more immersive audio than the previous methods.

• 방송공학회논문지
• /
• 제28권2호
• /
• pp.213-229
• /
• 2023

본 논문에서는 가상환경에 위치한 청취자의 움직임에 대응하여 실시간으로 6DoF 공간음향을 제공하는 공간음향 렌더링 시스템에 대해 소개한다. 본 시스템은 MPEG-I Immersive Audio CfP 대응을 위하여 MPEG-I AEP를 개발환경으로 사용하여 구현되었으며 인코더와, 디코더를 포함하는 렌더러로 구성된다. 인코더는 인코더 입력 포맷(EIF) 파일에 포함된 가상공간 장면의 공간적 오디오 파라미터와, SOFA 파일로 제공되는 음원의 지향성 정보 등의 메타데이터를 오프라인으로 부호화하여 비트스트림으로 전달하는 역할을 하며, 렌더러는 전달된 비트스트림을 수신하여 청취자의 위치에 따라 실시간으로 6DoF 공간음향 렌더링을 수행한다. 개발된 렌더링 시스템에 적용한 주요 공간음향 처리 기술로는 음원 효과 및 장애물 효과 처리 기술이 있으며, 그 외 시스템 동작에 필요한 기술로는 도플러 효과 및 음장효과 처리 기술 등이 있다. 개발된 시스템에 대한 성능평가 결과로서 자체 주관평가 결과를 소개한다.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제12권12호
• /
• pp.5936-5954
• /
• 2018

Eight out of the top ten the largest technology companies in the world are involved in some way with the coming mobile VR revolution since Facebook acquired Oculus. This trend has allowed the technology related with mobile VR to achieve remarkable growth in both academic and industry. Therefore, the importance of reproducing the acoustic expression for users to experience more realistic is increasing because auditory cues can enhance the perception of the complicated surrounding environment without the visual system in VR. This paper presents a audio downmixing system for auralization based on hardware, a stage of sound rendering pipelines that can reproduce realiy-like sound but requires high computation costs. The proposed system is verified through an FPGA platform with the special focus on hardware architectural designs for low power and real-time. The results show that the proposed system on an FPGA can downmix maximum 5 sources in real-time rate (52 FPS), with 382 mW low power consumptions. Furthermore, the generated 3D sound with the proposed system was verified with satisfactory results of sound quality via the user evaluation.

• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2018년도 제58차 하계학술대회논문집 26권2호
• /
• pp.76-77
• /
• 2018

본 논문에서는 재미있는 게임을 제작하기 위해 사용자 몰입을 극대화 할 수 있는 장치를 분석하고 이 가운데 청각적인 요소를 집중적으로 활용한 게임 디자인에 대해 소개하고자 한다. 암흑의 공간에서 긴장감을 조성하고 다양한 오브젝트들의 특성을 반영한 사운드를 이용하여 게임월드를 탐험하도록 설계하였고 이를 구현하였다. 본 게임은 사용자 몰입을 위한 게임 설계에 좋은 가이드라인이 될 것으로 기대한다.

• 한국음향학회지
• /
• 제42권5호
• /
• pp.388-394
• /
• 2023

얇은 패널에서 음향 정보를 전달하기 위해서 단일 지점을 가진하는 방법은 패널 자체의 진동 특성의 영향으로 방사되는 음장에 영향을 끼치게 된다. 기존의 패널 자체를 방사체로 활용 하고자 하는 스피커 시스템은 단일 또는 스테레오 사운드 제공 목적으로 음원이 되도록 하는 패널 특정 위치에 부착된 가진기를 이용하게 된다. 이렇게 방사하는 음향은 판이 갖는 모달 특성으로 인해 쉽게 왜곡될 수 있어 충분한 음향 파워를 갖거나 높은 방사효율을 기대하기 어렵다. 또한, 몰입감 높은 음장을 구현하기 위해서 한정된 가진기를 이용하는데 한계가 있다. 본 논문에서는 얇은 패널에 고정적으로 부착된 가진기를 이용하여, 패널 임의의 위치에서 음향이 방사되도록 진동-음향 역문제적 기법을 이용하여 진동장을 제어하도록 스피커 영역을 렌더링하여 제어하는 기법에 대해 다루었다. 국소화된 스피커 영역을 패널에서 생성하여 음원의 위치를 변화 시킬 수 있도록 하고, 가지기의 배치와 구현 가능한 스피커 영역의 위치 간 관계를 모사실험을 통해 제어 결과를 비교 및 검토하였다.