Journal of the Institute of Electronics Engineers of Korea CI (전자공학회논문지CI)

The Institute of Electronics and Information Engineers (대한전자공학회)
권호 표지

Knowledge-based Video Retrieval System Using Korean Closed-caption

한국어 폐쇄자막을 이용한 지식기반 비디오 검색 시스템

  • 조정원 (한양대학교 전자통신전파공학과) ;
  • 정승도 (한양대학교 전자통신전파공학) ;
  • 최병욱 (한양대학교 정보통신대학 정보통신학부)
  • Published : 2004.05.01
Download PDF
⟨ Previous Next ⟩

Abstract

The content-based retrieval using low-level features can hardly provide the retrieval result that corresponds with conceptual demand of user for intelligent retrieval. Video includes not only moving picture data, but also audio or closed-caption data. Knowledge-based video retrieval is able to provide the retrieval result that corresponds with conceptual demand of user because of performing automatic indexing with such a variety data. In this paper, we present the knowledge-based video retrieval system using Korean closed-caption. The closed-caption is indexed by Korean keyword extraction system including the morphological analysis process. As a result, we are able to retrieve the video by using keyword from the indexing database. In the experiment, we have applied the proposed method to news video with closed-caption generated by Korean stenographic system, and have empirically confirmed that the proposed method provides the retrieval result that corresponds with more meaningful conceptual demand of user.

저 수준의 특징정보를 사용하는 내용기반 검색만으로 지능형 정보검색을 위한 사용자의 개념적인 요구에 부합하는 검색결과를 제공하기 어렵다. 일반적으로 비디오 데이터에는 동영상 정보와 함께 음성, 음향 등의 오디오 정보와 폐쇄자막 등의 정보가 포함되어 있다. 지식기반 비디오 검색은 그러한 다양한 정보를 사용하여 자동색인을 수행하고 색인 데이터베이스를 구축한다. 이로써 사용자는 보다 개념적인 검색 요구에 부합하는 검색 결과를 얻을 수 있다. 본 논문에서는 비디오 내의 한국어 폐쇄자막을 이용한 지식기반 비디오 검색 시스템을 제안한다. 한국어 폐쇄자막은 형태소 분석 수준에서 자동색인되며, 색인 데이터베이스를 이용하여 키워드 질의를 통해 비디오를 검색할 수 있다. 실험에서 한국어 속기시스템으로 제작된 폐쇄자막이 포함된 뉴스비디오에 적용하여, 제안하는 방법이 사용자의 보다 의미 있는 개념적인 요구에 부합하는 검색 결과를 얻을 수 있음을 확인하였다.

Keywords

References

  1. Vittorio, C., Lawrence, D.B., Image Databases, Jon Wiley & Sons, Inc., pp. 261-279, 2002
  2. Howard, D.W., Takeo, K., Michael, A.S., Scott, M.S., 'Intelligent Access to Digital Video: Informedia Project,' IEEE computer (Digital Library Intiative special), Vol. 29, No.5, pp. 46-52, 1996 https://doi.org/10.1109/2.493456
  3. Alexander, G.H., Michael, J.W., 'Infomedia: News-on-Demand Multimedia Information Acquisition and Retrieval,' Intelligent Multimedia Information Retrieval, AAAI Press;The MIT Press, pp. 215-240, 1997
  4. Han-Woo K., 'Stenographic System for Caption Service of T.V Broadcasting,' Proceedings of TAO International Workshop on TV Closed Captions for the Hearing Impaired People. Nov. 20, pp. 31-35, 1999
  5. Inderjeet, M., David, H., Mark, T.M., Morgan, G., 'Towards Content-Based Browsing of Broadcast News Video,' Intelligent Multimedia Information Retrieval, AAAI Press/The MIT Press, pp. 241-258, 1997
  6. Jung-Won C., An Automatic Indexing System for Intelligent Information Retrieval Master's thesis, Hanyang University, pp. 26-28, 1998
  7. William, B.F., Ricardo, B.-Y., Information Retrieval: Data Structure and Algorithms, Prentice Hall, 1992
  8. Salton, G., Automatic Test Processing: The Transformation, Analysis, and Retrieval of Information by Computer, Addison Wesley Publishing, 1989
  9. MPEG-7 Visual Experimentation Model (XM), Ver 10.0, ISO/IEC/JTCI/SC29/WG11, Doc N4062, 2001
  10. Wei, Q., Lie, G., Hao, J., Xiang-Rong C., Hong-Jang Z., 'Integrating visual, audio and text analysis for news video,' Proc. of Int. Conf. on Image Processing, Vol. 3, pp. 520-523, 2000 https://doi.org/10.1109/ICIP.2000.899482
  11. Proc. of Int. Conf. on Image Processing v.3 Integrating visual, audio and text analysis for news video Wei,Q.;Lie,G.;Hao,J.;Xiang-Rong C.;Hong-Jang Z.