Journal of Internet Computing and Services (인터넷정보학회논문지)

Korean Society for Internet Information (한국인터넷정보학회)
권호 표지

Query-by-emotion sketch for local emotion-based image retrieval

지역 감성기반 영상 검색을 위한 감성 스케치 질의

  • Published : 2009.12.31
Download PDF
⟨ Previous Next ⟩

Abstract

In order to retrieve images with different emotions in regions of the images, this paper proposes the image retrieval system using emotion sketch. The proposed retrieval system divides an image into $17{\times}17$ sub-regions and extracts emotion features in each sub-region. In order to extract the emotion features, this paper uses emotion colors on 160 emotion words from H. Nagumo's color scheme imaging chart. We calculate a histogram of each sub-region and consider one emotion word having the maximal value as a representative emotion word of the sub-region. The system demonstrates the effectiveness of the proposed emotion sketch and our experimental results show that the system successfully retrieves on the Corel image database.

본 논문에서는 지역적으로 서로 다른 감성을 지닌 영상을 검출하기 위해서 감성 스케치를 이용한 영상 검색 시스템을 제안 하였다. 제안하는 검색 시스템은 영상을 $17{\times}17$의 겹치지 않는 부분영역으로 나누고, 각 부분영역에 대한 감성 특징을 추출한다. 본 논문에서는 부분영역 내에서 감성 특징을 추출하기 위해서, H. Nagumo의 배색이미지차트에서 제안하는 160개 감성어에 대한 감성 색상을 이용하였다. 부분영역으로부터 해당 감성어에 대한 감성 색상의 분포정도를 계산하여 각 부분영역의 감성어에 대한 히스토그램 값 중 가장 큰 값을 지닌 감성어를 취하게 된다. 제안하는 감성 스케치를 이용한 영상 검색 시스템은 Corel 영상 데이터베이스에 대해서 유효성을 평가하여, 전역적 방법보다 우수한 검색 정확도와 재현도를 가짐을 보여주었다.

Keywords

References

  1. M. De Marsicoi, L. Cinque, and S. Levialdi,“Indexing pictorial documents by their content: A survey of current technique,” Image vis. comput., vol. 15, pp. 119 - 141, 1997. https://doi.org/10.1016/S0262-8856(96)01114-6
  2. A. Yoshitaka and T. Ichikawa, “A survey on content-based retrieval for multimedia databases,” IEEE trans. Knowledge Data Eng., vol. 11, pp. 81 -93, 1999. https://doi.org/10.1109/69.755617
  3. W. Wang and Q. He, "A survey on emotional semantic image retrieval", in Proc. ICIP, pp. 117-120, 2008.
  4. S. Wang, "A robust CBIR approach using local color histograms," Technical report TR 01-13, U. of Alberta Edmonton, Alberta, Canada, 2001.
  5. K. Yoshida, T. Kato, and T. Yanaru, "Image retrieval system using impression words," in Proc. IEEE SMC, vol.3, no.11-14, pp. 2780-2784, 1998.
  6. C. Colombo, A. Del Bimbo, and P. Pala, “Semantics in visual information retrieval,” IEEE Multimedia, vol. 6, no. 3, pp. 38-53, 1999. https://doi.org/10.1109/93.790610
  7. S.-B. Cho, "Towards creative evolutionary systems with interactive genetic algorithm," Applied intelligence, vol. 16, no. 2, pp. 129-138, 2002. https://doi.org/10.1023/A:1013614519179
  8. J.-S. Um, K.-B. Eum, and J.-W. Lee, "A study of the emotional evaluation models of color patterns based on the adaptive fuzzy system and the neural network," Color research and application, vol. 27, no. 3, pp. 208-216, 2002. https://doi.org/10.1002/col.10052
  9. 유현우, “질의 감성 표시자와 유사도 피드백을이용한 감성 영상 검색," 정보과학회논문지 : 소프트웨어 및 응용, vol. 32, no. 3, pp. 141-152,2005.
  10. 이경미, 박우창, 이은옥, 권혜영, 차은미, “내용,감성, 메타데이터의 결합을 이용한 텍스타일영싱 검색,” 인터넷정보학회논문지, vol. 9, no.5, pp. 99-108, 2008.
  11. H. Nagumo, 칼라이미지차트(김상두 편역), 조형사, 2000.