• 한국멀티미디어학회논문지
• /
• 제24권8호
• /
• pp.1184-1191
• /
• 2021

In a pop song, the creator's intention is communicated to the user through music and lyrics. Lyric meaning is as important as music, but in most cases lyrics are delivered to users in a static form without non-verbal cues. Providing lyrics in a static text format is inefficient in conveying the emotions of a music. Recently, lyrics video with kinetic typography are increasingly provided, but producing them requires expertise and a lot of time. Therefore, in this system, the emotions of the lyrics are found through the analysis of the text of the lyrics, and the deep learning model is trained with the data obtained by converting the melody into a Mel-spectrogram format to find the appropriate emotions for the music. It sets properties such as motion, font, and color using the emotions found in the music, and automatically creates a kinetic typography video. In this study, we tried to enhance the effect of conveying the meaning of music through this system.

• 대한임베디드공학회논문지
• /
• 제18권5호
• /
• pp.217-223
• /
• 2023

In this paper, we propose a new model for the conditional generation of music, considering key and rhythm, fundamental elements of music. MIDI sheet music is converted into a WAV format, which is then transformed into a Mel Spectrogram using the Short-Time Fourier Transform (STFT). Using this information, key and rhythm details are classified by passing through two Convolutional Neural Networks (CNNs), and this information is again fed into the Music Transformer. The key and rhythm details are combined by differentially multiplying the weights and the embedding vectors of the MIDI events. Several experiments are conducted, including a process for determining the optimal weights. This research represents a new effort to integrate essential elements into music generation and explains the detailed structure and operating principles of the model, verifying its effects and potentials through experiments. In this study, the accuracy for rhythm classification reached 94.7%, the accuracy for key classification reached 92.1%, and the Negative Likelihood based on the weights of the embedding vector resulted in 3.01.

• 헤리티지:역사와 과학
• /
• 제38권
• /
• pp.5-42
• /
• 2005

대전광역시 무형문화재 제2호 신석봉 법사(法師)에 대한 현지 조사를 통하여 앉은굿의 기초이며 핵심인 안택(安宅)굿의 음악을 연구함으로써 다음과 같은 음악적 특징을 밝힐 수 있었다. 앉은굿의 경문(經文) 구송(口誦)을 위한 반주 악기로는 북과 꽹과리가 쓰이는데, 법사의 오른편에 놓인 북은 경문(經文)을 읊을 때 기본 장단을 규칙적으로 조용히 연주해 반주 역할을 하고, 법사의 왼편에 놓인 꽹과리는 경문 악절의 휴지부를 메우는 역할을 하므로 각 고장(鼓杖) 에 맞는 리듬 패턴을 다양한 변주 형태로 연주한다. 이와 같이 경문을 구송하다 법사의 호흡이나 경문의 내용에 따라 잠깐의 휴지부를 갖고, 그 사이를 꽹과리 변주 리듬으로 메우는 것은 국악 연주 방식 중 하나로, 합주 시 주선율 연주 악기들이 쉬는 사이에 다른 악기가 주선율을 이어서 연주하는 '연음형식(蓮音形式)'과 같다. 이 악기 반주에 맞추어 구송되는 안택굿 경문의 장단 주기는, 대체로 3소박4박의 '외마치 장단', 3소박8박의 '두마치 장단', 그 외에 '외마치 장단'과 같이 3소박4박의 리듬형을 가지고 있지만 그 템포가 매우 빠른 '세마치 장단', 다양한 리듬패턴 없이 획일화된 리듬형을 일률적으로 막치는 '막고장', 그리고 그 일반적인 장단형에서 벗어난 '못갖춘 장단의 다섯 가지 유형이 있다. 신석봉 법사는 안택굿 전반의 각 처에 걸쳐 '두마치 장단, 주기로 소위 그가 청(淸)이 라고 말하는 창(唱) 즉 소리를 하고 있으며, 오직 안택 마지막 처인 대문에서 구송되는 '퇴송경'만이 '외마치 장단' 주기로 연주하고 있음을 알 수 있었다. 그 외에 비교적 앞의 두 장단보다 그 템포가 빠른 '세마치 장단'과 '막고장'은 무당이 춤출 때와 신장대 잡을 때 경(經) 없이 악기 연주로만 행해졌다. 특히 춤출 때 연주되는 '세마치 장단'은 비교적 느린 템포에서 시작하여 점점 몰아치다가 다시 느린 템포로 돌아오는데, 이와 같이 우리 음악의 대표적인 빠르기 형식 중 하나인 느림-빠름-느림의 형태를 보이고 있다. 음조직에 있어서는 구성음이 mi-la-do'-re'이며, 그 주요 음이 mi-la-do'의 완4도+단3도 음진행을 보이고 있는 메나리토리의 음구성이나 음진행과 같지만, 첫 음인 mi음을 떨고 re'에서 do'로 흘러내리는 시김새를 갖는 전형적인 메나리토리 시김새의 특징이 조금 약하게 보이고 있다. 이는 아마도 전 지역에 걸쳐 그 음악적 어법(語法)이 경상도에 비해 비교적 약한 충청도라는 지역적인 음토리의 결과일 것이라 생각한다. 또한 안택굿 음악의 가사 붙임에 따른 리듬형태는, 비교적 그 템포가 다른 경문들에 비해 빠르고 la음이 곡 전반에 걸쳐 지속적으로 나타나는 '퇴송경'에서만은 오직 '실라빅(syllabic)'한 리듬형을 보이지만, 일반적으로 '신코페이션(syncopation)'이나 '멜리스마틱(melismatic)' 식의 리듬형으로 구성되어 있다. 마지막으로 각 경문에 따른 음구성을 간략히 살펴 본 결과, 음구성은 일반적으로 la음의 비중이 크며, la음을 중심으로 la-do' 상행과 la-mi 하행의 단3도, 완전4도 음정의 음진행을 주로 보이고 있다. 또한 전체 곡의 빠르기는 M.M.♩.=116-184정도의 빠르기에서 움직이고 있지만, 굿 전반에 걸쳐서는 대부분 경문 구송에 알맞은 빠르기인 M.M.♩=120-140 사이의 템포 즉 '보통빠르기' 정도로 진행되었다.

• 인문언어
• /
• 제2권2호
• /
• pp.5-50
• /
• 2002

This paper aims to illustrate and illuminate the relationship between language and its neighbor disciplines, in particular between language and literature, language and religion, and language and music. 1. Language and literature. Literature is an art of language. Therefore, linguistics, the science of language, should be able to explain how the grammar of literature elevates and ordinary language into a literary language. I illustrate poetic syntax with examples from Shelley, Coleridge, and Wordsworth. 2. Language and religion. I show how a linguistic analysis of a religious text can illuminate the background, authorship, chronology, etc., of a religious text with an example from the Book of Daniel. I also illustrate how a misanalysis of a poetic meter led to a mistranslation with an example from the Book of Psalms. 3. Language and music. First I trace an epochal event in the history of the Western music, i.e., the change of the musical style from the liturgical music of Latin in which the rhythm was created by the alternation of syllable duration into the liberated music of German in which the rhythm was generated by the alternation of lexical stress. I then illustrate a parallelism between linguistic and musical structures with several musical pieces including Gregorian chant, the 16th century music of Palestrina, the 17th century music of Schutz, the 18th century music of Mozart, and the 19th century Viennese music. Finally, the importance of text-tune (verse-melody) association is discussed with examples of mismatches in translated Korean hymns and contemporary Korean lyrical songs. In the concluding part, I speculate on some factors that are responsible for the same organizational devices in three different modes of human communication. An answer may be that all are under the same laws of mind that govern the way man perceives and organizes nature, i.e., the same cognitive abilities of man, in particular, the capacity to organize and impose structure on their respective inputs.

• 정보처리학회논문지D
• /
• 제19D권3호
• /
• pp.211-220
• /
• 2012

최근 들어 K-POP의 인기가 국내 뿐 아니라 외국에서도 선풍적인 인기를 모으고 있다. 이 이유는 한 곡에서 똑같은 멜로디의 반복이 70여번까지 행해지는 등 귀에 박힐 듯이 반복되는 후크송이라는데 특징이 있다. 여기에 군무 등 시각적 요소 등이 가미되면서 인기를 끌고 있다. 본 논문에서는 60년대부터 K-POP에 이르기까지 우리나라 가요의 시대별 선호이유를 음향 신호 분석기술을 적용하여 분석하는 방법을 제안하고자 한다. 이를 위해 각 시대별로 유행했던 여자 가수들의 가요를 중심으로 음향 신호 분석을 통해 한국가요의 선호도가 어찌 변해 왔는지를 규명하는 실험을 행하고자 한다. 음향신호분석 기술을 적용하여 실험을 행한 결과 한국가요의 선호도에 대한 과학적 규명 및 이를 시대별로 구분 짓는 작업이 가능했으며 기존에 한국 가요의 선호 이유에 대한 주관적, 통계적 자료를 음향 신호 분석의 정량적 잣대로 객관화, 수치화를 행할 수 있었다.

• 디지털콘텐츠학회 논문지
• /
• 제19권4호
• /
• pp.829-836
• /
• 2018

악보는 성공적인 곡 해석, 연주, 공연 등을 위해 필수적인 요소로 인식되고 있으며, 대부분의 연주자들은 이러한 상황에서 일반적으로 종이악보를 활용하고 있다. 그러나 종이악보는 페이지를 넘겨야 할 때 연주자 및 청중의 집중도를 떨어뜨리는 원인 중 하나가 될 뿐 아니라, 전체적인 연주의 흐름을 저해하는 요소로 작용하기도 한다. 또한 이러한 종이악보의 단점들은 공연장소 주변의 날씨나 환경 등으로 인해 더더욱 부각될 수밖에 없다. 본 논문에서는 이러한 종이악보의 단점들을 해결하기 위한 태블릿 PC기반의 전자악보 페이지 터너 애플리케이션을 제안한다. 제안하는 페이지 터너 애플리케이션은 원활한 연주 진행을 위해 연주자의 시선 또는 동작을 판독하여 전자악보를 다음페이지로 넘길 수 있도록 구현되어 있으며, 시선추적 및 동작 판독 알고리즘은 OpenCV를 통해 구현하였다. 제안하는 페이지 터너 애플리케이션을 통해 기존 종이악보가 갖고 있는 문제점을 상당부분 개선할 수 있을 것으로 기대한다.

• 한국음향학회지
• /
• 제39권6호
• /
• pp.622-628
• /
• 2020

본 논문은 순환 신경망(Recurrent Neural Network, RNN)으로 구성된 적대적 생성 신경망(Generative Adversarial Network, GAN) 모델을 사용하여 자동으로 트로트 음악을 생성하는 음악생성 기법을 제안한다. 제안된 방법은 음악의 뼈대를 담당하는 코드를 만들고, 만들어진 코드 열을 기반으로 멜로디와 베이스(bass)를 단계적으로 생성한 뒤, 해당 코드에 붙임으로써 구조화된 음악을 완성하는 방법을 사용한다. 또한 인트로나 벌스, 코러스 등과 같이 일정 구간으로 나뉘어 구조가 반복되는 트로트 가요의 특징을 적용하여 벌스의 코드 진행으로부터 새로운 코러스 코드 진행을 만들어내고, 다시 해당 코드로부터 멜로디와 베이스를 단계적으로 생성하여 초기에 만들어진 트로트의 길이를 확장한다. 주관적 평가와 객관적 평가방법을 사용하여 생성된 음악의 품질을 측정하였으며, 기존의 트로트가 갖고 있는 음악적 특성과 유사한 음악을 생성함으로 확인하였다.

• 한국통신학회논문지
• /
• 제41권11호
• /
• pp.1456-1462
• /
• 2016

본 논문에서는 규칙 기반의 4성부 합창 음악 생성 과정에 화성 진행 학습 모델을 적용해 보고자 한다. 제안하는 시스템은 32음의 멜로디를 입력으로 받아 다른 세 성부를 화성학의 규칙에 맞게 완성시켜 주며, 그 과정에서 사용하는 화성 진행을 CRBM 모델을 이용하여 예측한다. 학습 데이터는 화성학 교육 자료집에서 다수 발췌하였으며, 화성 진행을 조성에 독립적으로 추출하여 주어진 데이터를 효과적으로 활용할 수 있도록 하였다. 학습 모델을 적용한 결과물이 기존의 규칙 기반 4성부 합창 음악에 비해 보다 자연스러운 진행을 보임이 확인되었다.

• 디자인학연구
• /
• 제16권3호
• /
• pp.263-272
• /
• 2003

모션그래픽스는 짧은 영화가 아니며 디자인 특유의 커뮤니케이션방식을 갖는다. 그래픽디자인에서 공간구성이 필요한 것처럼 모션그래픽스에서는 시간구성이 요구된다. 이미 1920년대 독일 바우하우스의 예술가들은 추상에니메이션을 위한 계획안에서 시간구성을 시도한 바 있다. 같은 시대에 러시아의 몽타주영화에서는 서로 이질적인 이미지들을 연속적으로 충돌시킴으로써 새로운 의미를 발생시키는 움직이는 이미지 구성이 시도되었다. 오늘날 디지털 시대를 맞이하여 모션그래픽스에서는 동영상, 사진, 일러스트레이션, 타이포 등 다양한 요소들이 구성(Composition)된다. 몽타주영화에서 편집이 이미지들을 시간의 막대에 한 줄로 늘어놓는 1차원적인 구성이라면 오늘날 모션그래픽스에서 편집은 수많은 레이어(Layer)를 통해 여러 요소들을 복합적으로 구성하는 특징을 갖는다. 모션그래픽스에서 시간구성을 위해서는 시나리오나 스토리 보오드 이외에 시간구조를 짜고 시각적인 리듬을 만드는 일이 필요하다. 시간구성은 음악에서 작곡과 같은 원리를 갖는다. 추상애니메이션이나 몽타주영화의 시간구성이 간단한 단음의 멜로디라면 모션그래픽스에서 시간구성은 여러 개의 음이 한꺼번에 울리는 교향악과 같다. 다양한 구성요소들이 각기 다른 속도로 동시에 전개되는 것이다.

• 한국정보처리학회논문지
• /
• 제7권12호
• /
• pp.3762-3774
• /
• 2000

컴퓨터 하드웨어 및 멀티미디어 정보 처리 기술의 발달로 인하여 멀티미디어 정보 검색 시스템에 대한 요구가 증대되고 있다. 멀티미디어 정보 검색 시스템은 텍스트와 이미지 위주로 발전하였으나 비디오와 오디오 정보, 특히 음악 정보를 위한 멀티미디어 정보 검색 시스템에 대한 요구가 점차 증대되고 있다. 최근의 음악 정보 검색 시스템에서는 해당 음악 정보의 작곡가, 곡명 등과 같은 메타 정보만을 이용한 메타 정보 기반의 검색뿐만 아니라 음악의 내용을 기반으로 하는 내용 기반 검색까지도 가능하다. 음악의 내용 기반 검색에서는 메타 정보 기반 검색에서 흔히 볼 수 있는 문자열에 대한 패턴 매칭보다는 멀티미디어 데이타간의 유사도를 기반으로 검색한다. 본 논문에서는 음악을 일정한 선율에 따른 음들의 배합으로 정의하고, 선율을 구성하는 음의 높이와 음의 길이 정보를 복합적으로 이용하여 두 음악 정보간의 유사도를 계산하는 알고리즘을 제안한다. 또한, 본 논문에서는 제안된 유사도 계산 알고리즘의 검증을 위해 동요를 대상으로 실험을 하였다. 실험 결과에 따르면 제안된 유사도 계산 알고리즘이 기존에 제안된 내용기반 음악 정보 검색 시스템과 비교하여 음악의 선율 정보를 기준으로 음악들간의 유사도를 보다 정확하게 효과적으로 계산하였다.