Adaptive Image Content-Based Retrieval Techniques for Multiple Queries

다중 질의를 위한 적응적 영상 내용 기반 검색 기법

  • Published : 2005.05.01

Abstract

Recently there have been many efforts to support searching and browsing based on the visual content of image and multimedia data. Most existing approaches to content-based image retrieval rely on query by example or user based low-level features such as color, shape, texture. But these methods of query are not easy to use and restrict. In this paper we propose a method for automatic color object extraction and labelling to support multiple queries of content-based image retrieval system. These approaches simplify the regions within images using single colorizing algorithm and extract color object using proposed Color and Spatial based Binary tree map(CSB tree map). And by searching over a large of number of processed regions, a index for the database is created by using proposed labelling method. This allows very fast indexing of the image by color contents of the images and spatial attributes. Futhermore, information about the labelled regions, such as the color set, size, and location, enables variable multiple queries that combine both color content and spatial relationships of regions. We proved our proposed system to be high performance through experiment comparable with another algorithm using 'Washington' image database.

본 최근 영상 및 멀티미디어의 시각적인 내용을 기반으로 하는 검색 방법에 관한 많은 연구들이 진행되고 있다. 내용 기반 영상 검색(content-based image retrieval)에 관한 대부분의 기존의 질의 방법은 입력 영상에 의한 질의 또는 컬러(color), 형태(shape), 특징(texture) 등과 같은 low-level 특징을 사용한다. 그러나 이러한 방법들은 비교적 사용하기 불편하고 방법이 편중되어 있어서 일반 사용자들의 다양한 질의 요구에 적합하지 못하다. 본 논문에서 제안하는 것은 내용 기반 영상 검색 시스템 하의 컬러 객체의 자동 추출과 다중 질의를 위한 레이블링 알고리즘이다. 이것은 먼저 single colorizing 알고리즘을 사용하여 영상의 영역을 단순화 시키고 제안하는 Color and Spatial based Binary tree map (CSB tree map)을 이용하여 컬러 객체를 추출한다. 그리고 제안하는 레이블링 알고리즘을 이용하여 데이터베이스의 객체들을 색인한다. 이것은 컬러와 공간 정보를 고속으로 레이블링 하고 객체의 컬러 속성과 크기 및 위치 정보를 이용하여 객체의 컬러 기반과 공간적 기반의 조합을 바탕으로 하는 사용자의 다양한 질의에 부합할 수 있는 적응성 있는 시스템을 구현한다. 본 논문에서는 "Washington" 데이터베이스를 이용한 비교 실험을 통해서 제안하는 시스템의 검색 결과의 우수함을 알 수 있었다.

Keywords

References

  1. M. J. Swain and D. H. Ballard,' Color Indexing,' International Journal of Computer Vision, vol. 7, no. 1, pp.11-32, 1991 https://doi.org/10.1007/BF00130487
  2. B. S. Manjunath, W. Y. Ma, 'Texture Features for Browsing and Retrieval of Image Data,' IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol.10, Aug, 1996 https://doi.org/10.1109/34.531803
  3. R. Mehrotra adn J. Gary, 'Similar-shape retrieval in shape data management,' IEEE Computer, vol. 28, pp. 57-62. Sept. 1995 https://doi.org/10.1109/2.410154
  4. A. W. M. Smeulders, M. Worring, S. Santini, A. Gupta, and R. Jain, 'Content-based image retrieval at the end of the early years,' IEEE Trans. Pattern Anal. Mach. Intell., vol. 22, no. 12, pp. 1349-1380, Dec. 2000 https://doi.org/10.1109/34.895972
  5. Virginia E. Ogle and Michael Stonebraker, 'Chabot : Retrieval from a Relational Database of Images,' IEEE Computer, vol. 28, no. 9, 1995 https://doi.org/10.1109/2.410150
  6. John R. smith and Shih-Fu Chang, 'Tools and Techniques for Color Image Retrieval', IS&T/SPIE proceedings vol. 2670, Storage & Retrieval for Image and Video Database, 1995 https://doi.org/10.1117/12.234781
  7. G. Wyszecki and W. S. Stiles, Color Science: Concepts and Methods, John Wiley & Sons, 1982
  8. M. J. Swain and D. H. Ballard,' Color Indexing,' International Journal of Computer Vision, vol. 7, no. 1, pp.11-32, 1991 https://doi.org/10.1007/BF00130487
  9. R. C. Gonzalez, R. E. Woods, Digital image processing, Prentice-Hall, 2001
  10. Kishan Mehrotra, Chilukuri K. Mohan and Sanjay Ranka, Elements of Artificial Neural Networks, The MIT press, 1997
  11. Jing Huang, S. Ravi Kumar, Mandar Mitra, Wei-Jing Zhu and Ramin Zabih, 'Image Indexing Using Color Correlograms,' in Proc. of IEEE Conf. on Computer Vision and Pattern Recognition Conference. San Juan, Puerto Rico, June 1997 https://doi.org/10.1109/CVPR.1997.609412
  12. http://www.cs.washington.edu/research/imgedatabase/inedex.html
  13. Serge Belongie, Chad Carson, Hayit greenspan, and Jitendra Malik, 'Color and Texture-Based Image Segmentation Using EM and Its Application to Content-based Image retrival,' Sixth International Conference on Computer Vision, pp. 675-682, January. 1998 https://doi.org/10.1109/ICCV.1998.710790
  14. Abhijit. S. Pandy, Pattern Recognition With Neural Networks in C++, IEEE Press, 1995
  15. Jinshan Tang and Scott Acton, 'An Image Retrieval Algorithm using Multiple Query Images,' IEEE Proc. Signal Processing and Its Applications, vol. 1, pp. 193-196, 2003 https://doi.org/10.1109/ISSPA.2003.1224673