• 제목/요약/키워드: visual sound

검색결과 359건 처리시간 0.025초

사운드에 반응하는 시청각적인 인터랙티브 아트에 관한 연구 (A Study on Audio-Visual Interactive Art interacting with Sound -Focused on 21C Boogie Woogie)

  • 손진석;양지현;김규정
    • 만화애니메이션 연구
    • /
    • 통권35호
    • /
    • pp.329-346
    • /
    • 2014
  • 미술은 한 사회의 정치, 경제, 사회, 문화가 만들어낸 시대적 산물이다. 최근의 디지털 매체의 발전은 예술에서 표현을 확장하는데 기여하였다. 디지털 매체는 이미지뿐만 아니라 소리나 물리적 지각 반응을 예술 창작의 한 요소로써 활용하는 것을 가능하게 한다. 또한 디지털 매체는 이미지, 소리, 빛, 그리고 다양한 조형 요소들 간의 재 융합이나 관객의 물리적 반응의 결합을 통해서 작품과 관객과 상호소통적인 공감각적이고 시지각적인 환경을 창출하도록 돕는다. 본 연구에서는 최근에 소리에 반응하는 다양한 미디어아트 작품들이 제작되고 있는데, 주로 관객이나 외부의 자극으로부터 발생되는 소리의 물리적 데이터를 시각화하는 작업에 초점을 두고 시지각적 관점에서 소리의 반응에 따른 데이터의 시각화와 작품의 이미지와 관객의 반응 관계 등을 분석하였다. 외부의 소리로부터 생성되는 물리적 데이터는 여러 가지 관점에서 분석될 수 있다. 예를 들면, 음성이나 외부 소리의 고저(pitch), 음량, 또는 주파수 분석을 통해서 데이터 분류가 가능하다. 본 연구자는 관객의 음성이나 외부의 물리적 자극을 통해서 발생되는 소리의 주파수를 분석하여 이에 상응하여 발광하는 LED기반 시각화 연구를 통해서 최근 새로운 미디어아트의 가능성을 모색하고, 실시간으로 생성될 수 있는 물리적 데이터들을 빛(LED)의 환영적 특성으로 변환함으로써 우연하게 관객에 반응하여 생성되는 다양한 시각이미지의 연출 가능성을 탐구하였다. 결과적으로 연구자는 사운드에 반응하는 시지각적인 인터랙티브 작품을 구현해보기 위하여 피에트 몬드리안(Piet Mondrian, 1872~1944)의 브로드웨이 부기우기(Broadway Boogie Woogie, 1942~3)작품을 모티브로 삼았다. 몬드리앙은 회화의 본질적인 표현 요소들을 단순화하는 작업으로 불필요하다고 생각된 요소들을 하나씩 제거하여 색, 수직선, 수평선으로 대상을 추상화시킴으로써 그 대상의 본질에 다가가고자 하였다. 연구자는 몬드리앙의 이러한 단순화된 구성을 외부의 소리 자극을 단순화하여 빛(LED)의 요소로 재현하는 시각적 표현의 메타포로 사용하였고, 몬드리앙의 정적 구성에서 빛과 소리의 공감각적인 표현을 극대화하는 동적 구성으로의 관객의 참여를 유도하는 환경을 구현해 보았다.

모션 포스터의 시각적 표현 특징 연구 (A Study on Visual Expression Characteristics of Motion Poster)

  • 전혜연
    • 한국멀티미디어학회논문지
    • /
    • 제23권1호
    • /
    • pp.67-73
    • /
    • 2020
  • This paper analyzed the characteristics of Motion Poster (Moster) and discussed the visual expression methods. To this end, the existing literature on motion posters was organized. The visual representation of motion posters was analyzed by dividing into 'Main Visual', 'Mode of Movement', 'Playtime' and 'Sound'. The analysis results were as follows. As motion posters are kind of movie posters, they are made from the original movie poster images, characters, or scenes of the movie. Graphical representations used either photo-realism or computer realism. The movement methods are 'simple movement of visual elements(movement, gesture and rotation, appear or disappear)+fixed camera movement' or' camera movement (zoom in/out, rotate, move) + fixed visual element movement'. Playback time ranged from about 10 seconds to over 1 minute of video, and the longer the video, the higher the probability of including sound.

An Analysis of the English l Sound Produced by Korean Students

  • Yang, Byung-Gon
    • 음성과학
    • /
    • 제15권1호
    • /
    • pp.53-62
    • /
    • 2008
  • The purpose of this study was to examine the English l sound in an English short story produced by 16 Korean students in order to determine various allophones of the sound using acoustic visual displays and perceptual judgments. The subjects read the story in a quiet office at normal speed. Each word included the lateral sound in onset or coda positions and before a vowel of the following word. Results showed as follows: Firstly, there was a durational difference between the two major groups. Also the majority of the subjects produced the clear l regardless of the contexts. Some students produced the sound as the Korean flap or the English glide [r]. A few missing cases were also seen. The dark l was mostly produced by the subjects of English majors in coda position with a few cases before a vowel in a phrase. Visual displays using the computer analysis were very helpful in distinguishing lateral variants but sometimes perceptual process would be necessary to judge them in fast and weak production of the target word. Further studies would be desirable to test the discrepancies between the acoustical and perceptual decisions.

  • PDF

도심 공원의 소리연출에 의한 사운드스케이프 개선 효과에 관한 실험적 연구 (An experimental study on the effect of soundscape with providing sound in urban parks)

  • 김항;이태강;김선우
    • 한국소음진동공학회:학술대회논문집
    • /
    • 한국소음진동공학회 2004년도 춘계학술대회논문집
    • /
    • pp.1018-1021
    • /
    • 2004
  • This study is an experimental study to introduce the soundscape design for urban parks. subjective response to soundscape for 4 urban park are carried out using 7 scale S.D. method which are included 25 adjective pairs. In order to recognized the effect environmental sound(bird singing, sweet environmental music, nature sound) for enriching the present sondscape, this study analyse the subject response for soundscape after and before using the environmental sound. The degree of satisfaction for visual atmosphere is higher than for auditory atmosphere of parks, this means that visual clues are much more effective to the environment condition than auditory clues. The effect of using the environmental sound is positive and effective to enrich the soundscape. On providing environmental sounds, it is necessary to consider the charcteristics of urban parks.

  • PDF

WIGNER-VILLE INTERPRETATION OF MUSICAL SOUND AND TRANSIENT VIBRATION SIGNALS

  • Kim, Yang-Hann;Park, Yon-Kyu
    • 한국음향학회:학술대회논문집
    • /
    • 한국음향학회 1994년도 FIFTH WESTERN PACIFIC REGIONAL ACOUSTICS CONFERENCE SEOUL KOREA
    • /
    • pp.752-757
    • /
    • 1994
  • Very often, one would like to have visual image of mechanical or acoustical events such as musical sound and transient vibrations. Conventional methods to visualize the signal, such as power spectrum, do not normally allow to cultivate the signal of interests due to their inherent limitation on transient signals. Other than the conventional method, one could use an instantaneous frequency which can reveal the variation of frequency in terms of time. Nevertheless it is quite sensitive to noise and can not resolve the frequency components of signals; normally produces additional components other than those of the signals. In this paper, we introduce the Wigner-Ville spectrum to see the transient characteristics of signal, especially musical sound and transient mechanical vibration signatures. For musical sound, several popular western classic music have been selected for the analysis. For the transient mechanical signature, the signals obtained from the car door experiment and the beam experiment are interpreted in terms of Wigner-Ville spectrum. Results demonstrate the visual expressions of transient signals; musical sound and vibrations.

  • PDF

Sound Visualization Method using Joint Time-Frequency Analysis for Visual Machine Condition Monitoring

  • Seo, Jung-Hee;Park, Hung-Bog
    • 한국컴퓨터정보학회논문지
    • /
    • 제20권8호
    • /
    • pp.53-59
    • /
    • 2015
  • Noise from the surrounding environment, building structures and machine equipment have significant effects on daily life. Many solutions to this problem have been suggested by analyzing causes of noise generated from particular locations in general buildings or machine equipment and detecting defects of buildings or equipment. Therefore, this paper suggests a visualization technique of sounds by using the microphone array to measure sound sources from machines and perform the visual machine condition monitoring (VMCM). By analyzing sound signals and presenting effective sound visualization methods, it can be applied to identify machine's conditions and correct errors through real-time monitoring and visualization of noise generated from the plant machine equipment.

Aurally Relevant Analysis by Synthesis - VIPER a New Approach to Sound Design -

  • Daniel, Peter;Pischedda, Patrice
    • 한국소음진동공학회:학술대회논문집
    • /
    • 한국소음진동공학회 2003년도 춘계학술대회논문집
    • /
    • pp.1009-1009
    • /
    • 2003
  • VIPER a new tool for the VIsual PERception of sound quality and for sound design will be presented. Requirement for the visualization of sound quality is a signal analysis modeling the information processing of the ear. The first step of the signal processing implemented in VIPER, calculates an auditory spectrogram by a filter bank adapted to the time- and frequency resolution of the human ear. The second step removes redundant information by extracting time- and frequency contours from the auditory spectrogram in analogy to contours of the visual system. In a third step contours and/or auditory spectrogram can be resynthesised confirming that only aurally relevant information were extracted. The visualization of the contours in VIPER allows intuitively to grasp the important components of a signal. Contributions of parts of a signal to the overall quality can be easily auralized by editing and resynthesising the contours or the underlying auditory spectrogram. Resynthesis of time contours alone allows e.g. to auralize impulsive components separately from the tonal components. Further processing of the contours determines tonal parts in form of tracks. Audible differences between two versions of a sound can be visually inspected in VIPER through the help of auditory distance spectrograms. Applications are shown for the sound design of several interior noises of cars.

  • PDF

휴모노이드 로봇을 위한 시청각 정보 기반 음원 정위 시스템 구현 (Implementation of Sound Source Localization Based on Audio-visual Information for Humanoid Robots)

  • 박정욱;나승유;김진영
    • 음성과학
    • /
    • 제11권4호
    • /
    • pp.29-42
    • /
    • 2004
  • This paper presents an implementation of real-time speaker localization using audio-visual information. Four channels of microphone signals are processed to detect vertical as well as horizontal speaker positions. At first short-time average magnitude difference function(AMDF) signals are used to determine whether the microphone signals are human voices or not. And then the orientation and distance information of the sound sources can be obtained through interaural time difference. Finally visual information by a camera helps get finer tuning of the angles to speaker. Experimental results of the real-time localization system show that the performance improves to 99.6% compared to the rate of 88.8% when only the audio information is used.

  • PDF

이미지를 활용한 오디오-비쥬얼 시스템 구성 (Configuration of Audio-Visual System using Visual Image)

  • 서준석;홍성대;박진완
    • 한국콘텐츠학회논문지
    • /
    • 제8권6호
    • /
    • pp.121-129
    • /
    • 2008
  • 소리를 이용한 정보의 표현 방법은 무형의 특징을 가진 매체를 이용하여 어떠한 방법을 통하여 구체적인 형태를 이끌어 내는가에 대한 문제에서 시작된다. 이 과정에서 소리를 매개체로 이용하여 구성되는 오디오-비쥬얼 시스템은 청각적 소재를 이용한 시각적 표현이라는 방법적 측면에서 감각 기관의 연계에 대한 역할을 맡고 있는 부분에서 청각의 시각화라는 비 구체적 감각에 대한 구체화라는 변형의 의미를 갖는다. 오디오-비쥬얼 시스템 형태를 통한 작품을 표현하는데 있어 기존에 사용되던 프로그래밍을 통한 비규칙적 프로시쥬얼(Procedure)적 동적(動的) 이미지 또는 비동적(非動的) 이미지를 사용한 표현 방법에서 시각적 출력 방법의 제한으로 인한 표현 방법의 제한이 생겨날 수 있는 부분에 있어 동적 이미지를 이용한 오디오-비쥬얼 시스템을 통하여 소리를 매체로 한 다양한 표현 결과물을 이끌어낼 수 있다. 본 논문에서는 동적 이미지를 사용한 오디오-비쥬얼 시스템을 통해 다양한 청각적 소재의 시각화 방법 및 소리를 이용한 애니메이션 표현법의 새로운 대안을 제시한다.