• 감성과학
• /
• 제23권1호
• /
• pp.41-56
• /
• 2020

본 연구에서는 시각장애인이 시각 외의 잔존감각인 촉각, 청각, 후각을 활용하여 미술 작품을 감상하고 이해할 수 있도록 도울 수 있는 다중감각 인터랙션 기술을 제안한다. 나아가, 다중감각 인터랙션의 설계 적합성을 평가하기 위해 실제 시각장애인을 대상으로 다중감각 인터랙션 기술이 적용된 시스템을 통해 미술 작품을 감상한 경험에 대한 질적 인터뷰 기반의 사용자 테스트를 수행하였다. 사용자 테스트 결과, 미술 작품에 적용한 다중감각 인터랙션 요소들은 전반적으로 시각장애인으로 하여금 미술 작품 감상 및 이해를 도왔으며, 나아가 다중감각 인터랙션을 통해 미술 작품을 감상한 경험이 만족스러웠다는 긍정적인 평가 결과가 나타났다. 반면, 일부 다중감각 인터랙션 요소는 미술 작품을 감상하는 동안 전혀 인지하지 못하였거나 오히려 미술 작품 감상에 있어서 혼란을 야기했다는 부정적인 평가 결과도 나타났다. 본 연구는 시각장애인의 문화예술 작품 감상의 접근성을 증진할 수 있는 기술적 대안으로서 비시각 다중감각 인터랙션의 구체적인 개발 방향성 및 가이드라인을 제공하는 데 기여하였다. 나아가, 시각장애인뿐만 아니라 아동이나 노인과 같은 비시각장애인도 유니버설 인터랙션 기술을 통해 기존의 시각 위주의 단편적 경험을 넘어선 종합적인 감각적 경험을 할 수 있는 기술 기반을 구축하는데 기여할 수 있을 것으로 기대된다.

• 한국산학기술학회논문지
• /
• 제14권2호
• /
• pp.737-743
• /
• 2013

본 연구는 시각 통제를 이용한 다중감각 훈련이 아급성 뇌졸중 환자의 균형 및 체간위치감각에 미치는 영향을 알아보고자 시행하였다. 뇌졸중 환자 30명을 대상으로, 다중감각 훈련군은 시각통제 후 훈련을 실시하였고, 대조군은 안대로 눈을 가린 것을 제외하고는 실험군과 동일한 훈련을 실행 하였다. 두 군 모두 훈련 과정은 4주간 주 5회 60분 동안 실시하였다. 대상자들은 사전, 사후 평가로 정적 균형, 동적 균형 및 체간위치감각을 검사하였다. 본 연구의 결과는 다중감각 훈련군에서 훈련 전, 후를 비교한 결과 정적 균형, 동적 균형, 체간위치감각에서 유의한 향상이 나타났고(p<.05), 두 그룹 사이에서는 동적 균형, 체간위치감각에서 유의한 차이가 나타났다(p<.05). 본 연구의 결과를 통하여 다중감각 훈련은 동적 균형 및 체간위치감각을 향상시키는데 효과적인 훈련방법으로 제시 할 수 있다.

• 감성과학
• /
• 제21권4호
• /
• pp.77-90
• /
• 2018

자폐 스펙트럼 장애를 가진 대상(이하 ASD)의 정서 인식 능력에 대한 행동 연구의 결과는 혼재되어 있고, 대부분 단일 감각 양식의 정서 인식 능력에 대한 검증에 치중되어 있다. 따라서 ASD가 실제로 정서 인식 결함을 가지고 있는지에 대한 통합적 이해는 아직 이루어지지 않은 실정이다. 따라서 본 연구는 다중 감각 양식 정서 자극에 대한 따른 ASD 환자의 정서 인식 능력에 초점을 맞추고, ASD의 정서 인식 능력에 대한 혼재된 결과를 설명하기 위하여 최신 행동연구와 인지신경과학 연구들을 개관하였다. 그 결과, 정서 인식 과제에서 행동적 결함을 보이지 않았던 ASD 일지라도, 뇌 영상 결과에서는 정서 정보 통합 기능에서 결함이 발견되었다. 따라서 본 개관 연구에서는, 최근에 제안된 ASD의 다중 감각 양식에 따른 정서 인식 능력의 결함, ASD의 정서 정보 통합 기능 결함, 그리고 실생활에서 정서 인식의 어려움에 대한 가능성과 선행 연구들의 제한점에 대해 논의하였다. 또한, ASD가 정서 정보를 통합하는 과정에서 활용하는 보상 기제를 살펴보고, ASD의 정서 기능 결함과 관련된 치료적 접근 방향과 후속 연구에 대해 제언하였다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2007년도 학술대회 1부
• /
• pp.500-506
• /
• 2007

얼굴에 대한 시각적 인지는 오랫동안 인간에게 중요한 문제로 인식되어 왔다. 수 세기 동안 이루어져 왔던 미용 화장과 성형, 치아 교정 등의 다양한 연구는 사람의 얼굴을 감성적 측면에서 어떻게 하면 아름답게 만들 수 있는 가에 초점을 두었다. 본 논문에서는 휴먼 입출력 인터페이스로서 햅틱 장치와 스테레오 디스플레이를 혼합한 다중 감각 인터랙션 기반의 감성적인 3차원 얼굴 메이크업 시뮬레이션 프레임워크를 개발한다. 본 연구는 3차원 스캐너 장비로부터 사용자의 얼굴 모델을 추출하고, 그 데이터를 이용하여 자연스럽고 직관적인 얼굴 메이크업 시뮬레이션을 수행하는 것을 목표로 하고 있다. 이를 위하여 본 연구에서는 surface elements 표현 기반의 3차원 얼굴 필터링 방법과 얼굴 메이크업을 지원하는 페인팅 방법을 개발한다. 우선 사용자의 얼굴 모델을 3차원 스캐너로 획득한 후, 전처리 얼굴 필터링을 수행하여 조명, 그리고 사용자 얼굴 피부 상태에 기인하는 에러 및 속성들을 보정하고 피부 톤을 사용자가 선호하는 색으로 변경한다. 최종적으로 사용자는 햅틱 및 스테레오 디스플레이 장치를 이용하여 두 개의 레이어로 구성된 페인팅 표면 모델에 메이크업을 수행한다. 본 연구에서 적용한 surface elements 표현 기반의 그래픽 렌더링은 일반적인 메쉬 기반 페인팅의 문제점인 텍스쳐 왜곡 현상을 완화하고, 3차원 스캐너 장치에 기인하는 표면 에러를 보정한다. 그리고 전처리 얼굴 필터링과 메이크업 페인팅 방법은 사용자 중심의 감성적인 3차원 얼굴을 재구성하도록 한다. 결과적으로 본 연구에서 개발한 이러한 기술들이 다중 감각 인터페이스 기반의 메이크업 시뮬레이터의 기본 프레임워크가 되어, 차후 메이크업이나 코디네이션 분야 등의 디지털 콘텐츠 산업에서 활용될 수 있음을 확인하였다.

• 한국융합학회논문지
• /
• 제11권11호
• /
• pp.175-182
• /
• 2020

본 연구에서는 회화 감상에 도움이 되는 사운드스케이프를 구성하기 위해 딥러닝 기술을 활용하여 클래식 음악을 매칭하는 기술을 소개하고 회화와 음악 매칭이 얼마나 잘 되었는지에 대해 평가할 수 있는 평가 지표를 제안한다. 평가 지표는 리커드 5점 척도를 통한 적합도 평가와 멀티모달 측면의 평가로 진행하였다. 회화와 음악 매칭에 대해 13명의 실험 참가자의 적합도 평가의 점수는 3.74/5.0 이었고, 또한 13명의 실험 참가자의 멀티모달 평가에서 회화와 음악 매칭의 코사인 유사도의 평균은 0.79였다. 멀티모달적 평가는 새로운 사용자 경험을 측정할 수 있는 평가 지표가 될 것으로 기대된다. 또한 본 연구를 통해 시각과 청각의 인터랙션을 제안함으로써 다중감각 예술작품 경험을 향상시키고자 하였다. 본 연구에서 제안된 회화와 음악 매칭이 다중감각 예술작품 전시에서 활용되며 더 나아가 이는 시각 장애인들의 예술작품 감상에 대한 접근성을 높일 수 있을 것이라 기대한다.

• 감성과학
• /
• 제20권3호
• /
• pp.49-60
• /
• 2017

기존 연구들은 단순히 실물을 만지는 것만으로도 그 대상에 대해 심리적 소유감이 형성되고 그 가치를 높게 평가하게 되는 소유효과가 발생한다는 것을 발견하였다. 또한 단순히 만지는 상상을 하는 경우에도 실물을 만지는 것과 같은 효과가 나타난다는 것이 발견되었다. 기존의 촉각적 심상화 연구에서는 실물을 만지는 상상을 하라는 직접적인 지시에 따른 촉각적 심상화의 효과를 밝혔으나 본 연구에서는 실물을 만지는 상상을 하라는 직접적인 지시보다 촉각적 상상을 자연스럽게 유도할 수 있는 효과적인 방법을 탐색해보았다. 상상유도 조건을 상품에 대한 시각적, 촉각적 단서가 일치하는 다중감각 단서 일치 조건, 불일치하는 다중감각 단서 불일치 조건, 상상하라는 직접적 지시 조건, 통제조건으로 조작하여 촉각적 상상의 생생함, 물리적 통제감, 지각된 소유감, 구매의도에 미치는 효과를 비교하였다. 140명의 대학생을 대상으로 실험을 실시하여 분석한 결과, 시각적 단서와 촉각적 단서가 일치하도록 제공한 다중감각 단서는 촉각적 상상을 직접적으로 지시하였을 때보다도 효과적인 것으로 나타났으며 시각적, 촉각적 단서가 불일치한 경우는 효과적이지 않은 것으로 나타났다. 본 연구는 촉각적 심상화 연구에서 한걸음 나아간 시도이며 온라인 쇼핑과 같이 실물을 보거나 만질 수 없는 환경에서의 상품 제시 방법에 대한 함의점을 제공하는데 의의가 있다.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 2000년도 추계학술대회 논문집
• /
• pp.185-188
• /
• 2000

현재의 3차원 시각 정보 제시기는 Scene Graph 기반의 3차원 그래픽스 API에 기반을 두고 있다. 본 연구에서는 시각 정보 제시에 더불어 다양한 감각을 제시하기 위한 통합 제시 능력을 가지는 시스템으로 시각화 시스템을 확장하였다. 이 확장된 시스템은 다양한 감각 정보를 제시하기 위한 추가적인 정보를 가지는 확장된 Scene Graph을 가지고 운영되며, 통합된 Script System으로 각 감각 제시 시스템들간의 동기화 및 통합 관리와 제시 시스템의 확장에 유리한 장점을 가진다.

• 디지털융복합연구
• /
• 제20권4호
• /
• pp.575-584
• /
• 2022

본 연구는 실감콘텐츠에서 다양하게 나타나는 인터랙션 유형을 존 듀이의 경험이론을 통해 도출하고, 도출된 유형이 실제 사례에서는 어떤 방식으로 전달되는지 탐구하는데 목적이 있다. 이를 위해 국립중앙박물관 '디지털 실감 영상관'과 '아르떼미술관제주'의 두 사례를 경험이론에서 도출된 인터랙션 유형을 통해 분석하였다. 경험이론을 바탕으로 도출한 인터랙션 유형은 '다중감각'과 '동시체험' 그리고 '감각확장' 이다. 이 유형들이 두 사례에서 공통적으로 하나씩 접목되어 나타나기보다는 연결되어 나타났다. 단방향에서는 '다중감각'에서 '감각확장'으로 이어지고 양방향에서는 '동시체험'에서 '감각확장'으로 연결되었다. 이처럼 기술과 인간이 소통하는 핵심 유형은 한 가지씩만 전달되는 것이 아니라 다중적인 방법으로 인터랙션 순환 고리가 형성되었다. 따라서 실감콘텐츠의 인터랙션 유형은 1:1의 부분적인 전달 방식이 아닌 다방면에서 다양한 감각과 체험이 융합되어 단계적으로 확장된다고 볼 수 있다. 이를 바탕으로 향후 실감콘텐츠에서 인터랙션이 구현되었을 때 유형들은 어떻게 확장되고 관람객들에게 어떤 영향을 주는지의 연구가 필요할 것이다.

• 방송공학회논문지
• /
• 제21권3호
• /
• pp.330-340
• /
• 2016

본 논문은 MPEG-A(ISO/IEC 23000) 표준으로 새로이 제정된 다중 감각 미디어 응용 포맷의 구조와 구현에 대해 설명한다. 다중 감각 미디어 응용 포맷은 비디오/오디오 데이터와 더불어 감각 효과 메타데이터의 효과적인 저장, 재생, 관리를 용이하게 한다. 포맷을 구성하기 위해, MPEG-4 파트 12(ISO/IEC 14496-12)의 ISO 기본미디어 파일 포맷과 MPEG-V 파트 3(ISO/IEC 23005-3)의 표준 메타데이터를 사용하였다. 본 논문에서는 MPEG-V 파트 3의 감각효과 메타데이터(SEM)의 샘플화를 위해 SEM XML 문서의 분할과, 분할된 샘플을 이진화하는 방법에 대해 비교 분석한다. 이진화 방법에 대한 비교 분석 결과 MPEG-V 이진표현 방법과 Binary MPEG format for XML(BiM)이 gzip방법에 비해 압축율과 처리시간 등에서 우수한 성능을 보였다.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 1999년도 추계학술대회 논문집
• /
• pp.92-96
• /
• 1999

다중 감각 실험 환경을 구축시에 시청각 뿐 아니라 열감각, 촉각, 후각등 다중 감각등의 제시가 필요하다. 이러한 실험 환경은 작업의 부하를 분산하고, 모듈 개발 방법을 도입하기 위해서 분산 시스템으로 구축되는데 이에 추가적으로 실시간 동작 속성을 가지는 프로토콜이 필요하다. 본 연구는 이러한 실시간 동작 속성을 가지며 개별 모듈의 용이한 개발의 지원과 고장시의 대책으로서 임의의 모듈의 고장시의 대처 방안과 제어 모듈의 프로그램 용이성을 제공하는 프로토콜을 설계하였다. 다양한 시뮬레이션 재구성 능력을 제공할 수 있는 필드의 동적 바인딩을 지원하며, 동일 모듈의 연결로 새로운 모듈을 합성할 수 있는 능력을 가질 수 있는 분산 실험 시스템을 설계하였다.