DOI QR코드

DOI QR Code

Large Scale Entertainment System based on Gesture Recognition for Learning Chinese Character Contents

제스처 인식 대형 놀이 시스템 기반 한자 학습 콘텐츠

  • 송대현 (전남대학교 전자컴퓨터공학과) ;
  • 박재완 (전남대학교 전자컴퓨터공학과) ;
  • 이칠우 (전남대학교 전자컴퓨터공학과)
  • Received : 2010.07.02
  • Accepted : 2010.09.28
  • Published : 2010.09.28

Abstract

In this paper, we propose a large scale entertainment system based on gesture recognition for learning Chinese character contents. The system is consisted of parts that forecast user's posture in two infrared images and part that recognize gestures from continuous poses. And we can divide and acquire in front side pose and side pose about one pose in each IR camera. This entertainment system is immersive in nature and convenient for its gestures based controlling system. Also, it can maximize information transmission because induce immersion and interest using two large size displays and various multimedia elements. The learning Chinese character contents can master Chinese character naturally because give interest to user and supply game and education at the same time. Therefore, it can expect synergy effect that can learn playing to user combining with large entertainment system based on gesture recognition.

본 논문에서는 제스처 인식 대형 놀이 시스템을 기반으로한 한자 학습 콘텐츠에 대해 제안한다. 제안한 시스템은 두 대의 적외선 영상에서 사용자의 포즈를 예측하는 부분과 연속된 포즈들로부터 제스처를 인식하는 부분으로 구성되어 있다. 그리고 각각의 적외선 카메라에서 하나의 포즈에 대한 정면 포즈와 옆면 포즈로 나눠서 획득한 후 이를 사용하여 HMM의 모델을 이용하여 제스처를 분류하였다. 사용자와 컴퓨터간 의사소통에 있어서, 장치를 사용하지 않고 사용자의 행동에 의한 조작을 통해 사용자가 쉽게 조작할 수 있고 편리함을 제공하였다. 또한 두 개의 대형 디스플레이와 다양한 멀티미디어 요소를 이용하여 몰입과 흥미를 유발시킬 수 있기 때문에 정보 전달을 극대화할 수 있다. 단순한 주입식 교육 콘텐츠가 아닌 에듀테인먼트 콘텐츠인 한자 학습 콘텐츠는 게임과 교육을 동시에 제공하여 사용자에게 재미와 흥미를 주어 자연스레 한자를 습득할 수 있고 제스처 기반 대형 놀이 시스템과 결합하면서 사용자에게 놀면서 배울 수 있는 시너지 효과를 기대할 수 있다.

Keywords

References

  1. 댄S.어커프, 로버트H, 라이허, 키즈마케팅 불변의 법칙, 북폴리오, 2004.
  2. 여선민, 증강현실 기반 콘텐츠 활용 수업의 효과성 분석, 원광대학교 교육대학원 석사학위 논문 2008(2).
  3. 안성혜, 송수미, “디지털 에듀테인먼트 콘텐츠의 유형과 사례분석”, 한국콘텐츠학회논문지, 제6권, 제3호, pp.72-86, 2008(9).
  4. 장상수, 박혜선, 김상호, 김항준 “HMM을 이용한 제스처 기반의 게임 인터페이스”, 한국정보과학회 봄 학술발표논문집, Vol.31, No.1, pp.46-53, 2004.
  5. 백승국, “에듀테인먼트 콘텐츠와 미디어 문화교육”, 한국 언론학회 2006년 봄철정기학술대회, pp.393-400, 2006.
  6. L. R. Welch. Hidden markov models and the baum-welch algorithm. IEEE Information Theory Society Newsletter, Vol.53, No.4, 2003.
  7. Lawrence R. Rabiner, “A Tutorial on Hidden Markov Models and Selected Applications in Speech Recognition,” IEEE Signal Processing Letters, Vol.10, No.1, pp.257-286, 2003(1). https://doi.org/10.1109/5.18626
  8. G. D. Forney Jr., “The forward–backward algorithm,” in Proc. 34th Allerton Conf. Communications, Control and Computing, pp.432-446, 1996.
  9. G. D. Forney, “The Viterbi algorithm,” Proc IEEE, Vol.61, pp.268-278, 1973(3). https://doi.org/10.1109/PROC.1973.9030