비디오 서버에서 온톨로지를 이용한 의미기반 장면 검색

Semantic-based Scene Retrieval Using Ontologies for Video Server

  • 정민영 (한양대학교 컴퓨터공학부) ;
  • 박성한 (한양대학교 컴퓨터공학부)
  • 발행 : 2008.09.25

초록

최근 멀티미디어 정보의 양이 빠른 속도로 증가함에 따라 비디오 자료에 대한 효율적 관리는 매우 중요한 의미를 가지게 되었다. 비디오는 대용량적인 특성과 비정형적인 특성을 가지고 있어 신속하고 효율적으로 비디오 검색을 하기 위해서는 정확한 특징 정보를 추출하여 비디오 색인 구조를 구축해야 한다. 비디오 색인 구조는 전통의 데이터베이스와는 다른 모델링 방법과 검색 방법을 사용한다. 따라서 비디오 색인 구조에서 검색의 속도와 정확도를 향상시키기 위해서는 새로운 비디오 색인 구조가 필요하다. 본 논문에서는 의미적으로 비디오를 장면단위로 검색할 수 있는 비디오 온톨로지 시스템을 제안한다. 비디오 온톨로지 시스템은 장면의 내용에 대한 키워드를 구조화 시킨 장면이름 온톨로지와 장면이 가지는 특징 정보에 대한 정보를 가지는 장면 모델 온톨로지로 구성된다. 장면 이름 온톨로지는 색인된 내용에 대한 의미적 검색이 가능하도록 단어들을 트리구조로 저장된다. 그리고 장면 모델 온톨로지는 색상, 모양, 재질과 같은 저수준 정보와 객체, 이벤트 같은 고수준 정보의 의미적 차이를 극복해 줌으로써 의미기반 검색이 가능하게 해준다.

To ensure access to rapidly growing video collection, video indexing is becoming more and more important. In this paper, video ontology system for retrieving a video data based on a scene unit is proposed. The proposed system creates a semantic scene as a basic unit of video retrieval, and limits a domain of retrieval through a subject of that scene. The content of semantic scene is defined using the relationship between object and event included in the key frame of shots. The semantic gap between the low level feature and the high level feature is solved through the scene ontology to ensure the semantic-based retrieval.

키워드

참고문헌

  1. M. Flickner, H. Sawhney, W. Niblack, J. Ashley, Huang Qian, B. Dom, M. Gorkani, J. Hafner, D. Lee, D. Petkovic, D. Steele, P. Yanker, "Query by image and video content: The QBIC system," IEEE Computer, vol. 28, no. 9, pp.23-32, September 1995. (432)
  2. J. M. Martinez, Overview of the mpeg-7 standard. technical report 5.0, ISO/IEC, Singapore, 2001
  3. C. Fellbaum, WordNet: An Electronic Lexical Database, Bradford Book, 1998
  4. L. Hollink, A.T. Schreiber, J. Wielemaker, and B. Wielinga, "Semantic annotation of image collections," In Proc. of Knowledge Markup and Semantic Annotation Workshop, USA, 2003
  5. A. Hoogs, J. Rittscher, G. Stein, and J. Schmiederer., "Video content annotation using visual analysis and a large semantic knowledgebase," In Proc. of IEEE Computer Society Conference on Computer Vision and Pattern Recognition, vol. 2, pp.379, 2003
  6. G.C. Stein, J. Rittscher, and A. Hoogs. Enabling "Video annotation using a semantic database extended with visual knowledge." In Proc. of ICME, vol. 1, pp.161-164, 2003
  7. L. Hollink, M. Worring, A.T. Schreiber, "Building a visual ontology for video retrieval", In Proc. of the ACM Multimedia, pp.479-482, 2005