• 트랜스-
• /
• 제1권
• /
• pp.91-116
• /
• 2016

본 연구의 목적은 춤과 음악과의 관계를 다루며 공연예술직품의 무대화 작업에서 어떻게 음악이 시각화되어 춤과의 연계를 돕는가를 살피는 것이다. 텍스트로 삼은 <윤이상을 만나다>는 윤이상의 음악을 중심으로 무용과 음악과 영상이 한 무대 위에 융합된 복합장르공연으로 음악이라는 청각적 콘텐츠를 무용과 영상이라는 시각적 정보를 중심으로 무대화하여 제시하고 있다. 일시적으로 음악은 무용이라는 신체의 움직임을 통해서 시각화되었고, 또한 카메라와 스크린을 이용한 영상매체를 통해 무대 위에 시각화되었다. 음악의 구조 속에 드러난 작곡가의 의도는 다중영상시스템의 활용을 통해 보다 선명하게 구현될 수 있었던 바 본 연구에서는 음악이 가진 특징적인 구조들이 어떤 방식으로 무대 위에 시각화되고 있는지, 음악의 구조와 시각적 구현을 분석적으로 살피고 있다. 음악의 이해를 바탕으로 한 시각화 작업은 디지털미디어 제어기술의 발달로 일정 부분 성취되었으며 향후 공연예술 콘텐츠가 어떻게 기존무대의 공간적 한계를 극복하며, 더 나아가 시공간을 재구성할 수 있을지 그 기능성을 엿보게 한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.1075-1080
• /
• 2009

이 글은 Music Information Retrieval(MIR) 기법을 사용하여 오디오 콘텐츠의 리듬 정보를 자동으로 분석하고 이를 시각화하는 방법에 대해 다룬다. 특히 MIR을 활용한 간단한 시각화(sound visualization) 어플리케이션을 소개함으로써 음악 정보 분석이 디자인, 시각 예술에서 다양하게 활용될 수 있음을 보이고자 한다. 음악적 정보를 시각 예술로 담아내려는 시도는 20세기 초 아방가르드 화가들에 의해 본격적으로 시작되었다. 80년대 이후에는 컴퓨터 기술의 급속한 발전으로 사운드와 이미지를 디지털 영역에서 쉽게 하나로 다룰 수 있게 되었고, 이에 따라 다양한 오디오 비주얼 예술작품들이 등장하였다. MIR은 오디오 콘텐츠로부터 음악적 정보를 분석하는 DSP(Digital Signal Processing) 기술로 최근 디지털 콘텐츠 시장의 확장과 더불어 연구가 활발히 진행되고 있다. 특히 웹이나 모바일에서는 이미 다양한 상용 어플리케이션이 적용되고 있는데 query-by-humming과 같은 음악 인식 어플리케이션이 대표적인 경우이다. 이 글에서는 onset 검출(onset detection)을 중심으로 음악적 리듬을 분석하는 알고리즘을 살펴보고 기본적인 조형원리에 따라 이를 시각화하는 어플리케이션의 예를 소개한다.

• 한국콘텐츠학회논문지
• /
• 제21권6호
• /
• pp.104-112
• /
• 2021

본 연구에서는 음악의 속성인 구성 요소 데이터들과 심리학의 감정 차원 모델을 기반으로 감정분석을 하였고 그 결과를 조형예술에서의 시각화 규칙에 적용하였다. 음악 속성 데이터를 활용한 기존의 연구들에서는 사람들이 원하는 음악을 분류, 검색, 추천할 수 있도록 하는 보다 실용적인 목적을 가진 사례들이 많았다. 본 연구에서는 특히 음원 분석에 따른 음악의 감정분석을 기반으로 사운드 데이터가 예술작품 창작의 재료가 되어 심미적 표현에 활용될 수 있도록 하는 것에 집중하였다. 음악의 시각화 연구를 위해서는 예술이 가지는 중요한 속성인 감정표현을 가능하게 하는 방법이 필요하였고 이를 위해 잘 구조화된 음악의 기본 속성 분류 및 감정 정보의 분류 체계를 마련하였다. 그리고 조형요소의 형태, 색상, 애니메이션을 통해 음악 요소들에 대해 감정을 기반으로 세분화 된 입력 매개 변수들을 반영하여 시각화하는 작업을 수행하였다. 본 연구는 음악 시각화를 활용하는 작가들에게 기초 자료로 활용될 수 있을 것이다. 또한 감정분석에 기반 한 음악 구성요소와 시각화 매칭을 위한 분석 방법 및 작품 결과는 향후 인공지능 기반의 자동화 된 시각화 연구의 기반이 될 수 있을 것이다.

• 한국게임학회 논문지
• /
• 제17권3호
• /
• pp.45-52
• /
• 2017

본 논문은 음악의 감성을 시각화하는 새로운 방법을 제안하는 논문으로 시각화를 위하여 감성 LED조명 제어 시스템을 고안하였으며 이 시스템은 청중들의 음악 경험을 더욱 풍요롭게 하기 위함에 목적이 있다. 이 시스템은 기존 연구의 음악 감성 분석 알고리즘을 이용하였는데 하나의 음악에서 하나의 감성을 추출하는 기존 연구의 한계를 보완하고자 음악의 1초당 세그먼트에서 감성을 추출 하여 감성 변화를 감지하는 방법을 연구하였다. 또한 LED조명의 감성 컬러는 IRI컬러 모델과 Thayer의 감성 모델을 기초로 새로운 감성 컬러 36가지를 정의 하여 각 감성에 맞는 색으로 연출 할 수 있도록 구성하고 애니메이션과 더불어 감성 LED 조명으로 표현 할 수 있도록 하였다. 이 시스템의 검증을 위한 실험 결과, 듣는이의 감성과 감성 LED 조명 시스템의 감성 일치율이 60% 이상으로 향후 음악 감성 기반 서비스의 중요한 밑거름이 될 것으로 보인다.

• 한국디자인학회:학술대회논문집
• /
• 한국디자인학회 2004년도 춘계 학술발표대회 논문집
• /
• pp.204-205
• /
• 2004

• 한국멀티미디어학회:학술대회논문집
• /
• 한국멀티미디어학회 2000년도 추계학술발표논문집
• /
• pp.353-356
• /
• 2000

시각장애자들이 음악을 듣고 음악에 대한 공부를 하기 위해서는 점자악보를 통하여서만이 가능하다. 그러나 이러한 점자악보를 만들기 위해서는 점역사를 통한 주문제작 방법 밖에는 없는 실정이다. 국내의 몇 안되는 점역사를 통해서 한곡의 점자악보를 얻기까지는 한달여의 기간과 많은 비용이 든다. 이러한 열악할 환경으로 인하여 시각장애자들이 음악을 공부하거나 전공하기에는 너무나 힘들 실정이다. 본 논문에서는 이러한 시각장애자들이 음악을 접할 수 있고 공부할 수 있도록 시간적, 비용적 측면에서 도움을 주기 위한 점자악보 생성 컴파일러에 대한 구현 내용을 기술한다. 점자악보 생성기는 기존의 컴퓨터에서 음악을 듣기위한 미디 파일을 입력으로 받아들여 점자 편집기에서 점자 변환에 사용되는 아스키 코드로 출력하여 시각장애자가 원하는 곡의 점자악보를 받는데 드는 비용과 시간을 절약할수 있도록 도와준다.

• 정보처리학회논문지:소프트웨어 및 데이터공학
• /
• 제4권4호
• /
• pp.195-200
• /
• 2015

최근 한국에서는 대부분의 사람들이 안드로이드 기반의 스마트폰을 사용하고 있고, 뮤직플레이어는 어느 스마트폰에서나 찾아볼 수 있다. 그러나 뮤직 플레이어들 중 사용자의 취향이나, 음악을 듣는 성향에 맞춰진 개인화된 애플리케이션은 찾아보기 힘든 실정이다. 본 논문에서는 음악을 분석하여 감정에 따라 자동으로 분류하고, 사용자가 입력한 감정에 따라 추천하며, 사용자의 선호도를 반영하는 기능을 제공할 뿐만 아니라, 음악을 색채를 통해 시각화함으로써 사용자가 음악을 보다 쉽게 느낄 수 있도록 구현된 감성 뮤직 플레이어를 제안한다. 이를 통해 사용자는 선곡의 어려움을 해소하고 자신에게 최적화된 애플리케이션을 사용할 수 있다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2007년도 학술대회 1부
• /
• pp.616-623
• /
• 2007

본 논문에서는 음악 신호로부터 추출한 비트 정보를 사용하여 가상 캐릭터의 움직임을 제어하는 방법에 대해 논한다. 특히 주기를 가지는 반복적인 동작, 그 중에서도 춤동작에 대한 음악 신호와의 동기화 방법을 제안한다. 서버로 구현된 음악 비트 인식기는 입력 음악 신호에 대한 분석 정보를 규칙적으로 출력한다. 동작 클라이언트는 동작 캡쳐를 통해 얻은 동작 데이터를 여러 개의 기본 동작들로 나누고, 사용자가 선택한 새로운 순서대로 기본 동작들을 연결하여 부드럽게 재생한다. 또한 서버에 접속하여 전송 받은 음악의 템포에 맞게 동작데이터를 와핑(warping)하고 음악의 주요 비트 시각에 맞추어 기본 동작들의 재생시작 시간을 동기화한다. 음원에 의한, 즉 박자, 강약, 비트와 같은 기본적인 정보뿐만 아니라 분위기, 박자 변화와 같은 고급 정보에도 동적으로 반응하여 춤을 추는 가상 캐릭터를 개발하는 것이 본 연구의 궁극적인 목표이다.

• 한국멀티미디어학회:학술대회논문집
• /
• 한국멀티미디어학회 2012년도 춘계학술발표대회논문집
• /
• pp.211-214
• /
• 2012

스트레스는 다양한 질병의 원인이 되며 스트레스의 해소는 질병 예방에 중요한 요인이라 할 수 있을 것이다. 스트레스를 해소시키는 방법 중 한 가지는 청각이나 시각을 이용하는 방법이다. 청각과 시각을 동시에 이용할 수 있다면 그 효과를 극대화 할 수 있을 것이다. 본 논문에서는 음악의 분위기를 자동으로 파악하고, 파악한 음악의 분위기를 표현할 수 있는 음악감성 조명기용 임베디드 리눅스 기반 필드 시스템을 제안하였다. 본 논문에서 제시한 필드서버를 감성조명과 함께 공원이나 가정집 등에 제공할 수 있을 것이고, 음악과 조명을 동시에 제공함으로 현대인 질병의 원인이라 할 수 있는 스트레스 해소가 가능할 것이다. 또한 본 논문의 시스템을 이용하여 임상실험을 실시하여 임상데이터를 확보한다면 심리 치료를 목적으로 하는 의학적 도구로 발전 할 수 있을 것으로 보인다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2007년도 학술대회 2부
• /
• pp.670-677
• /
• 2007

본 연구는 기존의 미디어 연구 내에서 시각미디어에 비해 상대적으로 그 중요성이 간과되어 왔던 음악미디어에 대한 계보적 접근을 통해서 MP3의 사회문화적 의미를 고찰해보는 시론적 성격을 가진 연구다. 이러한 분석을 위해서 고립주의적인 미디어 연구와는 달리 미디어 사이의 상호관계적인 맥락에서 미디어를 파악하는 미디어 재매개 이론을 이론적 기반으로 해 MP3에 대한 분석을 시도한다. 이러한 연구의 결과로 본 연구에서는 음악미디어의 재매개 과정을 소리의 비매개성과 인터페이스의 하이퍼매개성이라는 이중 논리로 분석했다. 또한 음악미디어 재매개의 관행으로 이동성과 사사화라는 측면에서 MP3가 기존 음악미디어들이 가지고 있던 '이동성과 사사화'에 '밀도의 심화'를 가져왔다고 밝혔다. MP3의 시공간성은 음악미디어의 청각적 시공간성과 모바일 기기들이 가지는 모바일 시간성의 융합을 통한 '모바일 음악 시공간성'으로 개념화 했으며, MP3의 사회적 물질적 차원의 재매개를 통한 듣기 체계의 변화는 저작권 문제와 음악가들의 지위의 변화의 차원에서 고찰되었다.