DOI QR코드

DOI QR Code

Representation and Detection of Video Shot s Features for Emotional Events

감정에 관련된 비디오 셧의 특징 표현 및 검출

  • 강행봉 (가톨릭대학교 컴퓨터정보공학부) ;
  • 박현재 (가톨릭대학교 대학원 컴퓨터공학과)
  • Published : 2004.02.01

Abstract

The processing of emotional information is very important in Human-Computer Interaction (HCI). In particular, it is very important in video information processing to deal with a user's affection. To handle emotional information, it is necessary to represent meaningful features and detect them efficiently. Even though it is not an easy task to detect emotional events from low level features such as colour and motion, it is possible to detect them if we use statistical analysis like Linear Discriminant Analysis (LDA). In this paper, we propose a representation scheme for emotion-related features and a defection method. We experiment with extracted features from video to detect emotional events and obtain desirable results.

인간과 컴퓨터간의 상호작용에 있어서 감정처리는 매우 중요한 부결이다. 특히, 비디오 정보처리에 있어서 사용자의 감정을 처리할 수 있다면 비디오 검색이나 요약본 추출 등 다양한 응용분야에 활용이 가능하다. 비디오 데이터로부터 이러한 감정 처리를 하기 위해서는 감정에 관련된 특징들을 표현하고, 검출하는 것이 필요하다. 쉽게 추출이 가능한 색상이나 모션 등의 저급 특징들로부터 고급 개념인 감정을 검출하는 것은 매우 어려운 일이지만, 감정에 관련된 여러 장면으로부터 LDA(Linear Discriminant Analysis)와 같은 통계적인 분석을 통해 감정에 관련된 특징들을 검출하는 것은 가능하다. 본 논문에서는 색상, 모션 및 셧 길이 정보로부터 감정과의 관련된 특징을 표현하고 검출하는 방법을 제안한다. 제안된 특징을 사용하여 감정 검출에 관련된 실험을 한 결과 바람직한 결과를 얻었다.

Keywords

References

  1. R. Picard, Affective Computing, MIT Press, 1997
  2. R. Picard, 'Affective Computing for HCI,' Proc. of HCI'99, Aug., 1999
  3. M. Cooper, Color Smart : How to use color to enhance your business and personal life, Pocket Book, 2000
  4. J. Itten, The Art of Color, Wiley, 1973
  5. J. Itten, The Elements of Color, Wiley, 1970
  6. J. Monaco, How to read a film, Oxford, 2000
  7. C. Dorai and S. Venkatesh eds. Media Computing : Computational Media Aesthetics, Kluwer Academic Publishers, 2002
  8. A. Hanjalic and L. Xu, 'User-oriented Affective Video Content Analysis', Proc. IEEE Workshop on Content Based Access of Image and Video Library, Kauai, HI, pp.50-57, Dec., 2001 https://doi.org/10.1109/IVL.2001.990856
  9. S. Moncrieff, C. Dorai, and S. Venkatesh, 'Affect Computing in Film through Sound Energy Dynamics', Proc. ACM Multimediap'01, pp.525-527, 2001 https://doi.org/10.1145/500141.500231
  10. P. Lang, 'The emotion probe : Studies of motivation and attention', American Psychologist, 50(5), PP.372-385, 1995 https://doi.org/10.1037/0003-066X.50.5.372
  11. E. Goldstein, Sensation and perception, Books/Cole, 1999
  12. A. D. Bimbo, Visual Information Retrival, Morgan Kaufmann, 1999
  13. H. Zhang, J. Wu, D. Zhong and S. Smoliar, 'An Integrated System for Content-based Video Retrieval and Browsing', Pattern Recognition, 30(4), 1997 https://doi.org/10.1016/S0031-3203(96)00109-4
  14. R. Duda, P. Hart and D. Stork, Pattern Classification, Wiley-Interscience, 2002
  15. S. Gong et al, Dynamic Vision, Imperial College Press, 2000
  16. B. Lucas and T. Kanade, 'An Iterative Technique of Image Registration and Its Application to Stereo', Proc. IJACI, pp.674-679, 1981
  17. H. Sundaram and S. Chang, 'Determining Computable Scenes in Films and their Structures using Audio-Visual Memory Models', Proc. Acm Multimedia'00, 2000 https://doi.org/10.1145/354384.354440