• 한국HCI학회:학술대회논문집
• /
• 2007.02a
• /
• pp.1069-1074
• /
• 2007

청각장애인이 PC환경에서 영화, 방송, 애니메이션 등의 동영상 콘텐츠를 이용할 때 장애의 정도에 따라 콘텐츠의 접근성에 있어서 시각적 수용 이외의 부분적 장애가 발생한다. 이러한 장애의 극복을 위해 수화 애니메이션이나 독화 교육과 같은 청각장애인의 정보 접근성 향상을 위한 콘텐츠와 기술이 개발된 사례가 있었으나 다소 한계점을 가지고 있다. 따라서 본 논문에서는 현대 뉴미디어 예술 작품의 예술적 표현 방법을 구성요소로서 추출하여, 기술과 감성의 조화가 어우러진 독창적인 콘텐츠를 생산할 수 있는 기술을 개발함으로써 PC환경에서 청각장애인의 동영상 콘텐츠에 대한 접근성 향상 방법을 추출하고, 실질적으로 청각적 효과의 시각적 변환 인터페이스 개발 및 이미지 캡션 생성 소프트웨어 개발을 통해 청각장애인의 동영상 콘텐츠 사용성을 극대화시킬 수 있는 방법론을 제시하고자 한다. 본 논문에서는 첫째, 청각장애인의 동영상 콘텐츠 접근성 분석, 둘째, 미디어아트 작품의 선별적 분석 및 유동요소 추출, 셋째, 인터페이스 및 콘텐츠 제작의 순서로 단계별 방법론을 제시하고 있다. 이 세번 째 단계에서 이미지 캡션 생성 소프트웨어가 개발되고, 비트맵 아이콘 형태의 이미지 캡션 콘텐츠가 생성된다. 개발한 이미지 캡션 생성 소프트웨어는 사용성에 입각한 일상의 언어적 요소와 예술 작품으로부터 추출한 청각 요소의 시각적요소로의 전환을 위한 인터페이스인 것이다. 이러한 기술의 개발은 기술적 측면으로는 청각장애인의 다양한 웹콘텐츠 접근 장애를 개선하는 독창적인 인터페이스 추출 환경을 확립하여 응용영역을 확대하고, 공학적으로 단언된 기술 영역을 콘텐츠 개발 기술이라는 새로운 영역으로 확장함으로써 간학제적 시도를 통한 기술영역을 유기적으로 확대하며, 문자와 오디오를 이미지와 시각적 효과로 전환하여 다각적인 미디어의 교차 활용 방안을 제시하여 콘텐츠를 형상화시키는 기술을 활성화 시키는 효과를 거둘 수 있다. 또한 청각장애인의 접근성 개선이라는 한정된 영역을 뛰어넘어 국가간 언어적인 장벽을 초월할 수 있는 다각적인 부가 동영상 콘텐츠에 대한 시도, 접근, 생산을 통해 글로벌 시대에 부응하는 새로운 방법론으로 발전 할 수 있다.

• The Journal of the Acoustical Society of Korea
• /
• v.24 no.8
• /
• pp.481-491
• /
• 2005

The purpose of this study is to interpret the evaluation structure of auditory images about streetscapes in urban area on the basis of the semantic view of soundscapes. Using the caption evaluation method. which is a new method, from 2001 to 2005, a total of 45 college students participated in a fieldwork to find out the images of sounds while walking on the main streets of Namwon city. It was able get various data which include elements, features, impressions, and preferences about auditory scene. In Namwon city, the elements of the formation of auditory images are classified into natural sound and artificial sound which include machinery sounds, community sounds. and signal sounds. Also, the features of the auditory scene are classified by kind of sound, behavior, condition, character, relationship of circumference and image. Finally, the impression of auditory scene is classified into three categories, which are the emotions of humans, atmosphere of the streets, and the characteristics of the sound itself. From the relationship between auditory scene and estimation, the elements, features and impressions of auditory scene consist of the items which are positive, neutral, and negative images. Also, it was able to grasp the characteristics of auditory image of place or space through the evaluation model of streetscapes in Namwon city.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.506-512
• /
• 2006

시각적인 정보전달이 어려운 상황에서의 대상인식, 혹은 시각장애인의 대상인식에 있어서 소리는 어느 정도의 역할을 할 수 있을까? 이 연구는 소리를 통해 대상의 형태정보를 전달하기 위해 진행되었다. 하나의 음(musical tone)을 음높이와 음색, 지속시간을 조정한 후, 머리전달함수(Head-Related Transfer Function: HRTF)를 이용하여 수평선, 수직선, 대각선, 곡선의 형태로 운동하는 3-D 사운드 형태소로 만들었다. 그리고 이들의 연속적인 조합을 통해 단순한 도형에서부터 복잡한 도형, 이들 2차원상의 도형을 단면으로 하는 3차원상의 도형들까지 그려내는 소리자극을 구성하였다. 성인 대학생을 대상으로 한 실험에서, 이렇게 만들어진 청각이미지(auditory image)를 듣고 표상된 형태를 여러 개의 시각적인 이미지들(visual images) 중에서 선택하는 과제를 실시하였는데, 실험 결과는 평균 78%의 정확율을 보였다. 이는 소리를 이용한 형태정보 전달의 가능성이 있음을 시사하는 것이며, 이러한 시도는 청각 인터페이스의 응용범위를 확장하는데 도움이 될 것이다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2021.06a
• /
• pp.141-144
• /
• 2021

최근 지상파 UHD 방송에서는 자막을 비디오 패킷에 삽입하여 전달하는 기존 방식이 아닌 별도의 전송로로 전달하는 폐쇄형 자막(closed caption) 방식을 적용하고 있다. 또한 자막에는 문자 뿐만 아니라 이미지까지 포함하여 청각장애인의 프로그램 이해도를 높이는데 활용할 수 있다. 따라서 본 논문에서는 청각장애 시청자가 방송 콘텐츠 내용의 이해도를 향상시키기 위하여 지상파 UHD 방송에서 기존의 문자 자막과 움직이는 이미지 자막(=감정표현 자막)을 송출하여 동시에 표현할 수 있는 송출시스템을 제안한다.

• Proceedings of the Korea Contents Association Conference
• /
• 2012.05a
• /
• pp.307-308
• /
• 2012

인간은 음에서도 색을 느낄 수 있다. 그리고 청각을 통하여 음의 높고(고음), 낮음(저음), 장(길고), 단(짧음), 맑고, 탁함에 따라 색을 다르게 느낄 수 있다. 이러한 현상을 색청(色聽)이라고 한다. 소리와 색의 연관성에 대하여 선행 연구를 고찰한 결과 색의 3속성 색상, 채도, 명도는 음악의 음계, 옥타브, 음색과 연관성이 있었다. 그리고 음악의 리듬은 조형의 공간, 형태의 조화와 반복이 유사하다는 것을 알 수 있었다. 본 연구는 에드워드 마이언(Edward D. Maryon)의 마르코톤의 음과 색의 이론을 바탕으로 뉴턴의 색채와 음계로 경상도 민요 밀양아리랑의 색채를 분석하였다. 분석 결과 밀양아리랑 음의 빈도에 의한 색채는 Blue Violet, Green Blue, Red, Yellow, Orange의 순으로 색채를 추출할 수 있었다. 추출된 색에서 연상되는 형용사 이미지는 힘, 정열, 인내, 열정, 진취적인, 우호적, 야망, 불꽃 등으로 경상도 지역 이미지로 연관 시킬 수 있다. 본 연구는 경상도민요 밀양아리랑의 음을 분석하여 색의 연상이미지와 지역 색을 찾는데 그 의의를 두었다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2021.06a
• /
• pp.135-136
• /
• 2021

최근 지상파 UHD 방송에서는 자막을 비디오 패킷에 삽입하여 전달하는 기존 방식이 아닌 별도의 전송로로 전달하는 폐쇄형 자막(closed caption) 방식을 적용하고 있다. 또한 자막에는 문자 뿐만 아니라 이미지까지 포함하여 청각장애인의 프로그램 이해도를 높이는데 활용할 수 있다. 따라서 본 논문에서는 청각장애 시청자가 방송 콘텐츠 내용의 이해도를 향상시키기 위하여 지상파 UHD 방송에서 기존의 문자 자막과 움직이는 이미지 자막(=감정표현 자막)을 수신하여 동시에 표현할 수 있는 수신시스템을 제안한다.

• The Journal of the Korea Contents Association
• /
• v.8 no.6
• /
• pp.121-129
• /
• 2008

With the help of information technology The problem of building a concrete form with a shapeless media is the starting point of presenting information by means of sound. Audio-Visual System using sound as a medium is a method that presents an auditory material visually and has a role of linking different sensory organs. In a sense, Audio-Visual System transfers a non-concrete sensation to a concrete one. Audio-Visual System presentation by late methods using active and non-active images produced by computerized irregular procedures can be limited because of the limited ways of visual output. On the other side, visualization using active images can induce more diverse expressions using sound as a medium. This study suggests a new way of expression in animations using visualization of various auditory materials and sounds built by Audio-Visual System with active images.

• KIEAE Journal
• /
• v.8 no.2
• /
• pp.11-21
• /
• 2008

The purpose of this study is to interpret the visual and auditory images and cognitive characteristics about townscapes in Namwon city. It was acquired the survey results about 8 types of verbal interviews and 2 kinds of sketch maps which are based on urban images from 102 Namwon residents. They held in a variety of images of Namwon in their minds such as Jiri mountain, clean environment, sightseeing, special products, urban/building structures, Korean classical music, historical novel, local sports, and emotional images. The nice streets or places which the residents recommended are the places which have abundant natural areas, psychological peace and rest, available space for physical activity, places for performances and events, and regional attractions. The streets or places which they didn't like are decadent places, and areas of crowded traffic. The transition times of visual and auditory scene can be classified with the Saemaul movement in the 1970's(the rural new community movement) and the improvement of the city in the 1990's. The elements of visual images in Namwon city on the basis of the cognitive maps were expressed such elements as paths, districts, nodes, edges, and landmarks. The elements of auditory images, which are on the basis of the concept of the soundscape, included sounds of narrative musical form unique to Korea; p'ansori, sounds of traditional markets, and sounds of nature. It was found that the imageability of visual and auditory images is relatively clear in specific areas in Namwon city.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 2001.05a
• /
• pp.97-103
• /
• 2001

인간은 외부 자극 중 시각 및 청각 자극으로부터 가장 많은 정보를 받아들이며 감성이 유발된다. 지금까지의 제품 개발 과정에서 디자인은 시각적 이미지에 중점을 두고 제품에 대한 사람의 느낌을 긍정적으로 만들어주는 외형적 심미성을 추구하여 왔다. 그러나 증대하는 고객의 감성욕구를 충족시키기 위해 기존의 시각 단독 자극에 의한 방법은 한계가 있으며, 따라서 두 가지 이상의 자극을 동시에 제공하는 복합자극을 활용함으로써 고객의 감성만족을 극대화하는 제품 디자인이 필요하다. 본 연구는 이미지 스케일에 나타난 대표적은 8가지 색상과 음향을 함께 제시할 때 인간 감성의 변화를 파악하고 두 자극간 상호 관련성을 조사하였다. 실험결과 동일속성의 색상, 음향이 제시될 때 유발되는 감성은 요소자극과 동일한 속성을 따르며 감성크기가 감소하였고, 반대 속성의 자극이 제시될 때 가성 변화 방향은 청각(음향) 방향과 동일하고, 자극의 크기는 상반된 속성에 의해 가성의 상쇄현상을 보여주었다. 또한 피실험자를 정적, 동적인 성격으로 구분하여 분석한 결과 감성 변화에 차이를 보였으며 이 결과를 토대로 다감각 디자인을 위해 감성의 개인성도 고려해야 함을 알 수 있었다.

• Proceedings of the Korea Society of Design Studies Conference
• /
• 2003.05a
• /
• pp.10-11
• /
• 2003