한국방송∙미디어공학회:학술대회논문집 (Proceedings of the Korean Society of Broadcast Engineers Conference)
- 한국방송∙미디어공학회 2020년도 하계학술대회
- /
- Pages.727-731
- /
- 2020
음향 장면 분류에서 히트맵 청취 분석
Listenable Explanation for Heatmap in Acoustic Scene Classification
- Suh, Sangwon (Electronics and Telecommunications Research Institute) ;
- Park, Sooyoung (Electronics and Telecommunications Research Institute) ;
-
Jeong, Youngho
(Electronics and Telecommunications Research Institute) ;
- Lee, Taejin (Electronics and Telecommunications Research Institute)
- 발행 : 2020.07.13
초록
인공신경망의 예측 결과에 대한 원인을 분석하는 것은 모델을 신뢰하기 위해 필요한 작업이다. 이에 컴퓨터 비전 분야에서는 돌출맵 또는 히트맵의 형태로 모델이 어떤 내용을 근거로 예측했는지 시각화 하는 모델 해석 방법들이 제안되었다. 하지만 오디오 분야에서는 스펙트로그램 상의 시각적 해석이 직관적이지 않으며, 실제 어떤 소리를 근거로 판단했는지 이해하기 어렵다. 따라서 본 연구에서는 히트맵의 청취 분석 시스템을 제안하고, 이를 활용한 음향 장면 분류 모델의 히트맵 청취 분석 실험을 진행하여 인공신경망의 예측 결과에 대해 사람이 이해할 수 있는 설명을 제공할 수 있는지 확인한다.
키워드