Journal of Korea Game Society (한국게임학회 논문지)

Korea Game Society (한국게임학회)
권호 표지

A Study on the Development of a Korean Manual Alphabet Learning Game with Avatar

아바타를 내장한 한글 지문자 학습 게임 개발에 관한 연구

  • Published : 2009.08.20
Download PDF
⟨ Previous Next ⟩

Abstract

In this paper, we described the development of a Korean Manual Alphabet (KMA) learning game with avatar. KMA letters correspond to the vocabulary of Korean Sign Language (KSL) when spelling a word. Each KMA letter corresponds to a letter of the Korean Alphabet (KA) and KA is represented as hand shapes by sign language user. We developed a KMA learning game for a beginner to learn KMA letters from sign language avatar and practice KMA presentation easily. The system composed of sign language teacher avatar GUI popup window based on OpenGL, KMA letter recognition module, KA letter raining game module and USB camera. A user learns a KMA letter with expressing KA syllabic from avatar and inputs a KMA letter to the system using USB camera. We evaluated the efficiency of the developed system through the verification of users.

본 논문은 아바타를 내장한 한글 지문자 학습 게임 개발에 관한 논문으로써, 초보자가 수화아바타에게서 지문자를 쉽게 배우고 쉽게 연습할 수 있도록 한글 지문자 인식 게임 프로그램개발을 제안한다. 지문자는 단어를 철자로 표현하는 한국수화의 어휘에 대응한다. 지문자 자모가 한글 자모에 일치하고 사용자에 의하여 한글이 손 모양으로 표현되었다. 시스템은 OpenGL에 기반한 수화아바타강사 GUI 팝업윈도우와 지문자 인식모듈, 여러 한글 자음 글자가 아래로 이동하는 게임 모듈, USB 카메라로 구성된다. 지문자는 한글 자모를 표현하는 것으로써, 사용자는 아바타로부터 지문자를 배우고 USB 카메라를 이용하여 시스템에 지문자를 간단하게 입력한다. 우리는 사용자들의 검증을 통하여 개발된 시스템의 성능을 평가하였다.

Keywords

References

  1. 김영순, 김연화, 몸짓 기호와 손짓 언어, 한국문화사, 2007.
  2. Knapp, Mark L,. & Hall, Judith A, “Nonverbal Communication in Human Interaction. (5th ed.)”, Thomas Learning, pp.7, 2007.
  3. 석동일. 한국수화의 언어학적 분석, 대구대학교 박사학위논문, 1989.
  4. Arbitrariness, Iconicity, “Historical Change in American Sign Language Nancy Frishberg Language”, Linguistic Society of America, Vol. 51, No. 3, pp. 696-719, 1975. https://doi.org/10.2307/412894
  5. 윤병천, “청인의 수화 습득 과정, 한국수화연구회”, 1. 39,1999.
  6. Jong-Sung Kim, Won Jang and Zeungnam Bien, “A Dynamic Gesture Recognition System for the Korean Sign Language (KSL)”, IEEE Trans. on Systems, Man, and Cybernetics, Vol. 26, No. 2, pp. 354-359, 1996. https://doi.org/10.1109/3477.485888
  7. Chan-Su Lee, Gyu-tae Park, Jong-Sung Kim, Zeungnam Bien, Won Jang, Sung-Kwon Kim, “Real-time Recognition System of Korean Sign Language based on Elementary Components”, Proceedings of Sixth International Conference on Fuzzy Systems (IEEE FUZZ'97), pp.1463-1468, 1997.
  8. Jung-Bae Kim, Kwang-Hyun Park, Won-Chul Bang, Jong-Sung Kim, and Z. Zenn Bien, “Continuous Korean Sign Language Recognition using Automata- Based Gesture Segmentation and Hidden Markov Model”, Proceedings of the 2001 International Conference on Control, Automation and Systems (ICCAS 2001), pp. 822-825, 2001.
  9. Young-Joon Oh, Kwang-Hyun Park and Zeungnam Bien, “Korean Manual Alphabet (KMA) Recognition for Composition of a Korean Syllable Character.Proceedings of the 2nd International Conference on Convergence Information Technology (ICCIT 2007)”, Gyeongju, Korea, pp. 1592-1597, November 21-23, 2007.
  10. Seungki Min, Sanghyuk Oh, Gyoryeong Kim, Taehyun Yoon, Yunli Lee and Keechul Jung, “Simple Glove-Based Korean Finger Spelling Recognition System”, The 2007 International Conference on Computational Science and Its Applications (ICCSA 2007), LNCS, Vol. 4705, pp. 1063-1073. 2007.
  11. 전라북도 교육정보과학원, 사랑의 수화교실, http://www.cein21.net/suhwoa/.
  12. 한글학회, http://www.hangeul.or.kr/.
  13. 서울선희학교 동창회 선희지, 1993.
  14. 최창석, 최운영, “수화 동작의 인식 및 동영상 생성의 연구동향”, 대한전자공학회 전자공학회지 제23권 제6호, pp. 671-681, 1996.6.
  15. Helene Brashear, Valerie Henderson, Kwang-Hyun Park, Harley Hamilton, Seungyon Lee and Thad Starner, “American Sign Language Recognition in Game Development for Deaf Children”, Proceedings of the 8th International ACM SIGACCESS Conference on Computers and Accessibility (ASSETS 2006), ACM Press, 2006.
  16. Hye Sun Park, Do Joon Jung and Hang Joon Kim, “Vision-Based Game Interface Using Human Gesture”, 2006 IEEE Pacific-Rim Symposium on Image and Video Technology (PSIVT'06), LNCS 4319, pp. 662-671, 2006.
  17. 김상호, 장재식, 김항준, “테트리스 게임을 위한비젼 기반의 인터페이스”, 한국정보과학회 2004년도 봄 학술발표논문집 제31권 제1호(B), pp.775-777, 2004.4.
  18. 김장운, 김송국, 장한별, 배기태, 이칠우, “에지방향성 히스토그램 데이터를 이용한 손 형상인식”, 한국정보과학회 2006 가을 학술발표논문집 제33권 제2호(B), 2006. 10.
  19. Lessig, Lawrence, “Code and Other Laws of Cyberspace”, Basic Books, 2000.
  20. I. Poggi, C. Pelachaud, “Performative facial Expressions in Animated Faces”, In J. Cassell, J. Sullivan, S. Prevost, E. Churchill (Eds.), Embodied Conversational Agents, Cambridge (Mass.): MIT Press, pp.155-188. 2000.
  21. 김종성, 도준형, 박광현, 김정배, 송경준, 변증남, “등각 사상을 이용한 인체 아바타의 장애물회피 경로 생성에 관한 연구”, 대한전자공학회논문지, 제 38권, 제 1호, pp. 7-18, 2001. 1.
  22. 오영준, 장효영, 정진우, 박광현, 김대진, 변증남, “3D 아바타의 자연스러운 수화 동작 표현방법”, 한국정보처리학회 논문지, 제 14-B권,제 2호, pp. 107-118, 2007. 4.
  23. 오영준, 박광현, 변증남, “수화 표현을 위한 손모양 편집 프로그램의 개발”, 대한전자공학회논문지, 제 44권 SC편, 제 4호, pp. 48-54, 2007. 7.
  24. “OpenCV”, Open Computer Vision library, Intel co..
  25. Paul A. Viola, Michael J. Jones, “Fast and Robust Classification using Asymmetric AdaBoost and a Detector Cascade”. Advances in Neural Information Processing Systems 14: Proceedings of the 2001 Conference (NIPS 2001), pp. 1311-1318, 2001.
  26. “The MPEG-2 specification”, ITU H.262, pp. 44, 2000.
  27. 박호식, 배철수, “수화 인식을 위한 얼굴과 손추적 알고리즘”, 한국통신학회논문지 제31권 제11C호 , pp. 1071-1076, 2006. 1.
  28. 정성환, 이문호, 오픈소스 OpenCV를 이용한 컴퓨터 비전 실무 프로그래밍 - 기본편, 홍릉과학출판사, pp. 498-499, 2007
  29. R. A. Fisher, “Frequency distribution of the values of the correlation coefficient in samples from an indefinitely large population”, Biometrika 10, pp. 507–521, 1915.
  30. 오영준, 박광현, 변증남, “템플릿 매칭에 기반한 한글 지문자 인식”, 제 20회 신호처리 합동학술대회 논문집, 2007.10.
  31. Liwei Wang, Yan Zhang, and Jufu Feng, “On the Euclidean Distance of Images”, IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 27, No. 8, pp. 1334-1339, August 2005. https://doi.org/10.1109/TPAMI.2005.165