• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2023년도 제67차 동계학술대회논문집 31권1호
• /
• pp.357-360
• /
• 2023

본 논문에서는 거품 입자의 물리적 속성을 활용하여 가상 시뮬레이션 장면에 맞는 거품 사운드를 합성하고 사운드의 물리적 현상을 기반으로 사운드의 크기를 효율적으로 제어할 수 있는 기법을 제안한다. 현실에서는 사운드의 근원지와 청중의 위치 관계에 따라 사운드 크기의 차이가 나타타는 것을 쉽게 관찰할 수 있다. 본 논문에서는 이 문제를 효율적으로 풀어내기 위해 복잡한 3차원 유체의 움직임을 분석하는 게 아닌, 2차원으로 투영된 입자의 유동을 분석하여 사운드를 합성하고 제어하는 방식을 소개한다. 우리의 방법은 거품 사운드의 크기를 효율적으로 조절할 수 있도록 스크린 공간에서 계산된 거품 입자의 속도와 위치를 활용하여 청중의 위치 관계 및 사운드의 방향성을 확인하고, 이를 통해 거품 사운드를 사실적으로 합성하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2016년도 춘계학술발표대회
• /
• pp.795-798
• /
• 2016

소니피케이션은 다양한 데이터를 사운드로 변환시키는 과정으로 본 연구에서는 뇌파 신호를 사운드로 생성하는 객관적인 워크플로우를 제시하고자 하였다. 현재까지의 뇌파 소니피케이션은 사운드로의 변환이 인위적이고 임의적으로 진행되어 객관적인 논리를 제시하지 못하고 있는 실정이다. 이에 본 연구에서는 뇌파데이터의 정량적 분석을 통해 파라미터 추출, 사운드 맵핑, 사운드 모델 구축에 대한 논리적 근거를 제시하였으며 이를 통해 뇌파데이터의 객관적인 소니피케이션 과정을 구현하였다. 파라미터 추출을 위해 15Hz High pass filtering이 가장 적절한 방법으로 확인되었으며 뇌파 데이터의 최대값 빈도 분석과 음악코드의 비율 분석을 실제로 맵핑시켜 사운드 모델을 구축하여 사운드 생성을 구현하였다. 결론적으로, 본 연구에서는 뇌파데이터의 소니피케이션 과정에 대한 객관적이고 논리적인 워크플로우를 제시하였으며 이러한 워크플로우가 다양한 분야에서 적용될 수 있을 것으로 예상된다.

• 만화애니메이션 연구
• /
• 통권20호
• /
• pp.87-104
• /
• 2010

애니메이션은 일반 영화와 마찬가지로 이미지와 사운드가 결합하여 의미와 감동을 만들어낸다. 유리 노르슈테인의 <이야기 속의 이야기>는 다양한 음악과 음향효과가 이미지와 잘 결합했다는 점에서, 애니메이션 사운드 분석의 좋은 사례가 되는 작품이다. 본 연구는 이 작품 속에서 사운드가 어떤 기능을 하면서 의미를 만드는가를 분석하는데 초점을 맞춘다. 일반적으로 사운드는 대사, 음악, 음향효과라는 세 개의 영역으로 나눠지며, 애니메이션은 각 영역에 독특한 미학적 특성이 있다. 대사에 사용되는 목소리는 캐릭터의 이미지에 맞춰 창조되며, 음악에서는 특별히 이미지와 리듬의 결합이 중요하다. 음향효과 면에서도 애니메이션에서는 단순한 소리의 모사가 아닌 움직임의 묘사라는 성격이 강하다. 본 연구는 이 세 가지 영역으로 나눠 사용된 사운드를 분석하되, 청점과 주관적 사운드, 사이음의 개념도 분석을 위해 사용했다. 작품에 사용된 러시아 자장가는 멜로디의 변주와 반복을 통해 전체 내러티브의 모티브로 기능을 한다. 아기와 늑대의 청점을 통한 주관적 사운드의 사용은 작품의 중심을 이루고 있는 캐릭터에 특별한 위상을 부여한다. 음악과 이미지의 반복적 결합, 음향효과의 언어적이고 주석적인 기능, 그리고 비교적 관습적인 음악과 음향사용은 작품의 가독성과 감동을 높여준다는 것들은 이 작품의 전체적 사운드사용의 특징이다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2008년도 추계학술대회
• /
• pp.45-49
• /
• 2008

본 연구는 TV광고음향의 사운드디자인에 대한 수용자 감성반응에 관한 연구이다. 연구방법으로 영상구조에서 음향이 없는 상태와, 음악설계사운드디자인을 제시 하였을 때 수용자가 받아들이는 음향감성반응을 뇌파측정을 통한 뇌 지수(BQT) 비교 방법으로 분석하였다. 본 연구를 통하여 영상에 있어 사운드의 시청각적 감성효과가 사운드디자인설계에 의하여 달라질 수 있음을 정량적 방법으로 확인할 수 있었다.

• 한국엔터테인먼트산업학회논문지
• /
• 제10권4호
• /
• pp.77-92
• /
• 2016

본 연구는 노먼 맥라렌의 Animated sound 기법이 본격적으로 도입된 구겐하임 시절의 작품인 "Dots" 와 "Loops"의 이미지와 사운드의 관계를 미셸 시옹의 시청각 분석 이론과 지그프리트 크라카우어의 동조성과 비동조성, 평행성과 대위법의 기준을 적용하여 분석적으로 고찰하였다. 두 작품의 분석 결과로서 사운드의 전개에 관한 측면, 추상 애니메이션의 표현적 측면에서 차별된 점도 일부 나타나지만, 주요한 두 가지의 음향적 소재가 주도하고 모노포니한 사운드로 구성되며 음향효과적 소재를 음악적으로 구성, 이미지와 사운드의 관계가 항상 동기화를 이루면서 평행성을 강조하는 점은 두 작품의 공통적 특징이다. 두 작품에서 사운드의 음고는 이미지의 전개 및 모양, 사운드의 음량은 이미지의 크기, 사운드의 음가는 이미지의 시간적 길이 및 이미지의 모양과 밀접하게 관계를 맺고 있다. 이처럼 "Dots"와 "Loops"는 이미지가 사운드로 되고, 사운드가 새로운 이미지와 만나는 과정을 통하여 이미지와 사운드는 서로의 종속 관계가 아닌 대등한 관계로서 분석되었다. 두 작품은 새로운 양식을 예견하듯이 미니멀 아트와 뮤직비디오적 성향을 보여주었고, 오늘날의 애니메이션 제작에 있어서 사운드 제작의 새로운 접근을 일깨워주었다.

• 만화애니메이션 연구
• /
• 통권36호
• /
• pp.469-491
• /
• 2014

웹툰은 출판만화에서 사운드를 시각적으로 표현했던 방법을 발전시켜왔으며, 웹 기술의 발전을 토대로 직접 소리를 들려주기까지 한다. 직접 들리는 소리는 당연히 사운드 분석의 대상이 된다. 그러나 들리지 않는 사운드도 분석 대상이 될 수 있다. 본 연구는 들리지 않는 소리를 분석할 수 있다는 것의 이론적 토대를 인지심리학의 이중부호 개념에 둔다. 작가는 자신의 청각적 기억을 시각적으로 기호화할 수 있고, 독자는 기억과 인출의 과정을 통해 시각화된 기호를 보고 사운드를 떠올릴 수 있다. 이와 같은 웹툰의 들리지는 않지만 떠올릴 수 있는 사운드와 직접 들리는 사운드 두 경우를 본 연구는 함께 분석대상으로 한다. 구체적 분석을 위해서는 이론적 성과물이 있는 영화 사운드 분석 방법을 활용할 수 있다. 소리를 구성하는 세 요소인 음량, 음조, 음색은 음향학에서는 주파수 등으로 설명되고 직접 들을 때는 느낌으로 알지만, 시각적으로는 사운드를 표현한 글자나 이미지의 선의 굵기와 위치, 음원의 이미지 등으로 알 수 있다. 내화면 사운드와 외화면 사운드의 시각적 표현은 만화의 칸과 관련이 있다. 일반적으로는 칸 외부로 외화면 사운드를 표현하지만 웹툰에서는 듣는 자를 강조하는 방법으로 칸 내부에 외화면 소리를 표현하기도 한다. 그리고 영화의 호러 장르가 장르 효과를 높이기 위해 사운드를 많이 사용하는데 웹툰에서도 호러 장르가 같은 효과를 위해 사운드를 많이 사용한다. 이러한 영화 사운드 분석 방법을 활용해 사운드를 이미지로 표현한 작품들을 분석해볼 때, 초창기 출판만화에서부터 시작한 사운드의 청각적 표현들이 계속 발전해서 웹툰에서 창의적으로 표현되고 있음을 알 수 있다. 특히 세로 이동을 활용한 칸의 배치 및 소리표현의 방식들은 웹툰이 보여준 새로운 방법들이며, 칸 모양도 훨씬 다양해졌다. 직접 들려주는 소리로는 BGM이 가장 먼저 사용되었는데 최근에는 한 회의 분위기에 맞춰 음향효과까지 섞어 맞춤 작곡된 곡들이 사용된다. 그리고 스크롤 이동에 맞춰 소리를 들려주는 프로그램이 개발되면서 특정 순간의 음향효과나 특정 장면에 어울리는 음악들을 들을 수 있게 되었다. 특히 호러 장르에서는 특정한 이미지와 공포를 불러일으키는 사운드를 같이 사용하여 장르적 효과를 배가시킨다. 이렇게 웹툰에서는 다양한 사운드 시각화 방법이 계속 창조되고 있으며 기술과 접목된 새로운 시도들이 이루어지고 있다. 이러한 발전은 웹툰이 하나의 문화콘텐츠로서의 융합의 장이 될 수 있음을 보여준다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2007년도 동계학술대회
• /
• pp.35-40
• /
• 2007

본 논문에서는 사운드디자이너가 주어진 영상조건 속에서 음원(sound source)을 어떻게 구성하고, 디자인하고, 믹싱하는가 에 따라 수용자의 그 감응도(감정적변화:sympathy response)와 인지도(이해와 기억도:acknowl-edgment)가 달라질 수 있는가를 분석하고자 한 것이다. 그 방법으로 영상음향의 구조에서 음악, 음향, 대사의 상호크기, 연결, 편집, 강조, 등을 달리한 영상 내에서 사운드디자인과 믹싱을 달리하여 실험하였으며 주관적평가방법과 뇌파변화측정방법 2가지로 하여 비교, 평가 분석하고자 했다. 사운드의 디자인구조가 수용자에게 미치는 영향도를 알아보는 이러한 연구는 영화, 방송 등 미디어사운드에서 사운드디자인 구조를 어떻게 만들어야 하는가? 에 대한 방법론적 정리에 기여할 것으로 기대된다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2013년도 추계학술발표대회
• /
• pp.1305-1308
• /
• 2013

본 논문에서는 스마트폰 사용자의 실시간 상황 인식을 위한 효과적인 사운드 분류 시스템을 제안한다. 이 시스템에서는 PCM 형태의 사운드 입력 데이터에 대한 전처리를 통해 고요한 사운드와 화이트 노이즈를 학습 및 분류 단계 이전에 미리 여과함으로써, 계산 자원의 불필요한 소모를 막을 수 있다. 또한 에너지 레벨이 낮아 신호의 패턴을 파악하기 어려운 사운드 데이터는 증폭함으로써, 이들에 대한 분류 성능을 향상시킬 수 있다. 또, 제안하는 사운드 분류 시스템에서는 HMM 분류 모델의 효율적인 학습과 적용을 위해 k-평균 군집화를 이용하여 특징 벡터들에 대한 차원 축소와 이산화를 수행하고, 그 결과를 모아 일정한 길이의 시계열 데이터를 구성하였다. 대학 연구동내 다양한 일상생활 상황들에서 수집한 8가지 유형의 사운드 데이터 집합을 이용하여 성능 분석 실험을 수행하였고, 이를 통해 본 논문에서 제안하는 사운드 분류 시스템의 높은 성능을 확인할 수 있었다.

• 한국콘텐츠학회논문지
• /
• 제19권7호
• /
• pp.427-435
• /
• 2019

사운드스케이프(soundscape)는 소리를 통해 문화와 환경, 사회적 변화를 이해하는데 중요한 역할을 하는 자료이지만, 자료의 기록, 보존, 분류, 분석을 위한 체계적인 연구 프레임워크의 구축은 아직 초기 단계에 있다. 토픽 모델링(topic modeling)은 문서에 숨겨져 있는 테마 구조를 드러내주는 알고리즘으로 연구 동향 분석과 같이 대량의 문서에 내재된 주제어를 찾아내기에 적합한 기법이다. 본 연구에서는 사운드스케이프 연구 분야의 대표적 학술지인 의 논문을 토픽 모델링 기법으로 분석하여 사운드스케이프 연구 동향을 파악할 수 있는 주제어를 도출해 보고, 이를 사운드스케이프 온톨로지(Soundscape Ontology) 및 사운드 아카이브의 메타데이터 설계 시 활용할 수 있는 방안에 대해 살펴보고자 한다. 이는 향후 시맨틱 웹 기술인 링크드 데이터(Linked Data) 기반의 사운드스케이프 아카이브 구축을 위한 메타데이터 설계의 기초 연구가 될 것이다.

• 문화기술의 융합
• /
• 제9권5호
• /
• pp.867-874
• /
• 2023

최근 급격한 기후변화로 인해 꿀벌의 생태계에 많은 문제가 발생하고 있다. 꿀벌의 개체 수 감소, 개화기의 변화로 인한 양봉 농가의 채밀에 막대한 영향을 주고 있다. 벌통안의 벌집을 육안으로 지속적 관찰이 불가능하기 때문에, 벌집안의 상태에 대하여 대부분 경험에 의한 지식에 의존하고 있는 실정이다. 따라서 IoT 기술을 접목한 스마트양봉에 대한 관심이 집중되고 있다. 특히, 양봉에서 가장 중요한 부분 중에 하나인 분봉과 관련하여, 여왕벌의 사운드로 분봉시기를 알 수 있다는 것을 경험적으로 알고는 있지만, 이를 체계적으로 데이터로 분석하는 방법은 전무한 현실이다. 단순하게 여왕벌의 사운드를 녹음해서 분석하면 될 수 있을 것 이라고 생각할 수 있지만, 벌통 주변의 다양한 소음 문제, 지속적으로 녹음이 불가능하다는 문제 등 여러가지 문제점을 해결하지 못하고 있다. 본 논문은 여왕벌사운드를 실시간 클라우드 시스템에 기록하여 사운드 패턴을 분석할 수 있는 시스템 개발에 대한 연구이다. 실시간으로 입력되는 벌통의 아날로그 사운드를 다채널로 입력받아 디지털로 변환한 후 여왕벌 사운드 주파수 대역에서 지속적으로 출력되는 사운드 패턴을 발견하게 되었다. 클라우드 시스템 접속하면 벌통 주변의 사운드와 벌통 내부의 온/습도, 무게, 내부 이동량 데이터 등을 모니터링 할 수 있도록 했다. 본 논문에서 개발된 시스템으로 여왕벌의 사운드패턴을 분석하고 벌통 내부의 상황을 알 수 있게 되었다, 이를 통해 꿀벌의 분봉 시기를 예측하거나 분봉 시기를 조절할 수 있는 정보를 제공할 수 있을 것이다.