DOI QR코드

DOI QR Code

Image Classification Approach for Improving CBIR System Performance

콘텐트 기반의 이미지검색을 위한 분류기 접근방법

  • Han, Woo-Jin (Ajou University Department of Software) ;
  • Sohn, Kyung-Ah (Ajou University Department of Software and Computer Engineering)
  • Received : 2016.05.11
  • Accepted : 2016.06.27
  • Published : 2016.07.31

Abstract

Content-Based image retrieval is a method to search by image features such as local color, texture, and other image content information, which is different from conventional tag or labeled text-based searching. In real life data, the number of images having tags or labels is relatively small, so it is hard to search the relevant images with text-based approach. Existing image search method only based on image feature similarity has limited performance and does not ensure that the results are what the user expected. In this study, we propose and validate a machine learning based approach to improve the performance of the image search engine. We note that when users search relevant images with a query image, they would expect the retrieved images belong to the same category as that of the query. Image classification method is combined with the traditional image feature similarity method. The proposed method is extensively validated on a public PASCAL VOC dataset consisting of 11,530 images from 20 categories.

콘텐트 기반 이미지 검색은 기존의 태그 또는 레이블이 있는 텍스트 기반의 검색이 아닌 이미지의 특징을 이용하여 검색하는 방법이다. 실생활 이미지 데이터는 태그나 레이블이 달려있는 경우가 많지 않기 때문에 텍스트 기반의 검색 방법을 사용하기 힘든 경우가 있다. 또한, 기존에 주로 사용되는 이미지 특징 벡터의 유사도를 사용하여 검색하는 방법은 추출 벡터의 유사도 기준으로 사용자가 의도한 결과가 나올지 확신할 수 없다. 예를 들어 사용자가 입력한 질의 이미지와 검색된 이미지들의 종류가 일치하는지의 문제가 있다. 본 논문에서는 사용자가 질의 이미지의 클래스를 예상하고 결과도 동일한 클래스를 원한다는 가정에 착안하여 이미지 검색 엔진의 성능을 개선하였다. 기존의 유사도 기반의 검색에 머신 러닝 기법을 사용한 이미지 분류기를 적용하여 질의와 동일한 클래스의 결과를 찾는 방법을 제안하였으며, 그 성능을 20개 카테고리에 속하는 11,530개의 이미지로 구성되어 있는 PASCAL VOC 공개 데이터를 이용하여 검증하였다.

Keywords

References

  1. P. S. Suhasini, K. Krishna, and I. M. Krishna, "CBIR using color histogram processing," J. Theoretical & Appl. Inf. Technol., vol. 6, no. 1, 2009.
  2. W. J. Han and K. A. Sohn, "Image classification approach for Improving CBIR system performance," in Proc. 2016 KICS Conf. Winter, pp. 308-309, Jeongseon, Korea, Jan. 2016.
  3. J. S. Song, S. J. Hur, Y. W. Park, and J. H. Choi, "User positioning method based on image similarity comparison using single camera," J. KICS, vol. 40, no. 8, pp. 1655-1666, Aug. 2015. https://doi.org/10.7840/kics.2015.40.8.1655
  4. M. Everingham, et al., "The pascal visual object classes (voc) challenge," Int. J. Computer Vision, vol. 88, no. 2, pp. 303-338, 2010. https://doi.org/10.1007/s11263-009-0275-4
  5. Y. Ke and R. Sukthankar, "PCA-SIFT: A more distinctive representation for local image descriptors," in Proc. IEEE Computer Soc. Conf. CVPR 2004, vol. 2, 2004.
  6. H. J. Jung and J. S. Yoo, "Feature matching algorithm robust to viewpoint change," J. KICS, vol. 40, no. 12, pp. 2363-2371, Dec. 2015. https://doi.org/10.7840/kics.2015.40.12.2363
  7. J. Yang, Y. G. Jiang, A. G. Hauptmann, C. W. Ngo, "Evaluating bag-of-visual-words representations in scene classification," in Proc. MIR '07, pp. 197-206, Sept. 2007.
  8. S. Jain, "A machine learning approach: SVM for image classification in CBIR," IJAIEM, vol. 2, no. 4, Apr. 2013.
  9. A. Liaw and M. Wiener, "Classification and regression by randomForest" R news, vol. 2, no. 3, pp. 18-22, Dec. 2002.
  10. X. Zhu, In Encyclopedia of Machine Learning, Springer US, "Semi-supervised learning," pp. 892-897, 2011.
  11. B. B. Chaudhuri and Ujjwal Bhattacharya, "Efficient training and improved performance of multilayer perceptron in pattern classification," Neurocomputing, vol 34, no. 1, pp. 11-27, 2000. https://doi.org/10.1016/S0925-2312(00)00305-2
  12. M. Lin, Q. Chen, and S. Yan. "Network in network," arXiv preprint arXiv: 1312.4400, Dec. 2013.
  13. Tyler Byers, "Mean average precision" Retrieved Apr. 29, 2016. https://www.kaggle.com/wiki/MeanAveragePrecision.
  14. G. R. Choi, H. W. Jung, J. H. Lee, "Contens-based image retrieval system design of shopping mall using SIFT matching," KIIS Spring Conf., vol. 22, no. 1, pp. 161-163, Mokpo, Korea, Apr. 2012.

Cited by

  1. 서포트 벡터 머신을 이용한 자연 연상 통계 기반 저작물 식별 알고리즘 vol.42, pp.5, 2016, https://doi.org/10.7840/kics.2017.42.5.959