Design & Implementation of Speechreading System using the Face Feature on the Korean 8 Vowels

얼굴 특징점을 이용한 한국어 8모음 독화 시스템 구축

  • Kim, Sun-Ok (School of Information & Communication Broadcasting Engineering, Halla University) ;
  • Lee, Kyong-Ho (School of Information & Communication Broadcasting Engineering, Halla University)
  • 김선옥 (한라대학교 정보통신공학부) ;
  • 이경호 (한라대학교 정보통신공학부)
  • Published : 2009.01.08

Abstract

본 논문은 한국어 8 단모음을 인식하는 자동 독화 신경망 시스템을 구축한 것이다. 얼굴의 특정들은 휘도와 채도 성분으로 인하여 다양한 색 공간에서 다양한 표현 값을 갖는다. 이를 이용하여 각 표현 값들을 증폭하거나 축소, 대비시킴으로서 얼굴 특정들을 추출되게 하였다. 눈과 코, 안쪽 입의 외곽선, 이의 외곽선을 찾았고, 그 후 한국어 8모음 발화시 구분되게 변화는 값들을 파라미터로 설정하였다. 한국어 8모음을 발화하는 2400개의 자료를 모아 분석하고 이 분석을 바탕으로 신경망 시스템을 구축하여 실험하였다. 이 실험에 정상인 5명이 동원되었고, 사람들 사이에 있는 관찰 오차를 정규화를 통하여 수정하였다. 5명으로 분석하였고, 5명으로 인식 실험하여 좋은 결과를 얻었다.

Keywords