DOI QR코드

DOI QR Code

Re-ranking the Results from Two Image Retrieval System in Cooperative Manner

두 영상검색 시스템의 협력적 이용을 통한 재순위화

  • 황중원 (한국과학기술원 전기 및 전자공학부) ;
  • 김현우 (다음 커뮤니케이션) ;
  • 김준모 (한국과학기술원 전기 및 전자공학부)
  • Received : 2013.02.07
  • Accepted : 2013.02.17
  • Published : 2014.02.25

Abstract

Image retrieval has become a huge part of computer vision and data mining. Although commercial image retrieval systems such as Google show great performances, the improvement on the performances are constantly on demand because of the rapid growth of data on web space. To satisfy the demand, many re-ranking methods, which enhance the performances by reordering retrieved results with independent algorithms, has been proposed. Conventional re-ranking algorithms are based on the assumption that visual patterns are not used on initial image retrieval stage. However, image search engines in present have begun to use the visual and the assumption is required to be reconsidered. Also, though it is possible to suspect that integration of multiple retrieval systems can improve the overall performance, the research on the topic has not been done sufficiently. In this paper, we made the condition that other manner than cooperation cannot improve the ranking result. We evaluate the algorithm on toy model and show that propose module can improve the retrieval results.

영상검색은 컴퓨터 비전과 데이터 마이닝 분야의 주요한 주제 중 하나이다. 현재 상용화된 영상 검색 시스템이 놀라운 성능을 보여주고 있음에도 불구하고, 폭발적으로 증가하는 웹상의 영상정보를 효율적으로 검색하기 위하여, 영상 검색 기술의 성능향상이 꾸준히 요구되고 있다. 재순위화는, 이런 요구를 만족시키기 위한 방법 중 하나로서, 영상 검색 시스템이 도출한 초기 결과를, 독자적인 알고리즘을 통해 연관도를 한 번 더 계산하고, 그에 따라 검색 결과의 성능을 향상시키는 방법이다. 지금까지 제안된 많은 재순위화 알고리즘이, 영상 검색 시스템이 영상의 시각적 정보를 사용하지 않는다는 가정하에 개발되어 왔지만, 현재 Google 과 Baidu 등 많은 상업적 영상 검색 시스템이 영상의 시각적 패턴에 대한 정보를 사용하기 시작함에 따라 이러한 가정이 어긋나고 있다. 또한, 영상 검색 시스템들이 독자적인 환경에서 개발되었기 때문에, 다수의 영상 검색 시스템의 협력으로 성능을 향상시킬 수 있을 것이라 예측되는 상황에도 불구하고, 이에 대한 연구가 부족했다. 본 논문에서는 이 두 가지 문제를 해결하기 위하여, 두 영상 검색 시스템이 사용하는 시각적 특징을 바탕으로, 두 시스템의 상보적인 정보를 이용하는 방법에 대하여 제안한다. 성능에 대한 평가는 가상 모형에서 이루어졌으며, 제안된 방법을 통하여 성능향상이 가능하다는 것을 보여준다.

Keywords

References

  1. R. Yan, A. Hauptmann, and R. Jin, "Multimedia search with pseudo-relevance feedback," Proceedings of the 2nd international conference on Image and video retrieval, vol. 2728, pp. 238-247, 2003.
  2. W. H. Hsu, L. S. Kennedy, and S.-F. Chang, "Video search reranking via information bottleneck principle," Proceedings of the 14th annual ACM international conference on Multimedia, pp. 35-44, 2006.
  3. X. Tian, L. Yang, J.Wang, Y. Yang, X. Wu, and X.-S. Hua, "Bayesian video search reranking," Proceedings of the 16th ACM international conference on Multimedia, pp. 131-140, 2008.
  4. Y. Liu , T. Mei and X. S. Hua, "CrowdReranking: Exploring multiple search engines for visual searchreranking," Proceedings of the 32nd international ACM SIGIR conference on Research and development in information retrieval, pp.500-507, Mar. 2009
  5. X. Tian, D. Tao, X.-S. Hua, and X. Wu, "Active reranking for web image search," IEEE Transactions on Image Processing, vol. 19, no. 3, pp. 805-820, 2010. https://doi.org/10.1109/TIP.2009.2035866
  6. L. Duan, W. Li, I. W. Tsang, and D. Xu, "Improving web image search by bag-based reranking," IEEE Transactions on Image Processing, vol. 20, no. 11, pp. 3280-3290, Nov. 2011. https://doi.org/10.1109/TIP.2011.2159227
  7. Wikipedia. "List of CBIR Engines" Available: http://en.wikipedia.org/wiki/List_of_CBIR_engines, 2013, [Accessed: December, 22, 2013]
  8. Y. Jing and S. Baluja, "VisualRank: Applying pagerank to large-scale image search," IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 30, no. 11, pp. 1877-1890, Nov, 2008. https://doi.org/10.1109/TPAMI.2008.121
  9. J. Liu, R. Hu, M. Wang, Y. Wang, and E. Y. Chang, "Web-scale image annotation," Proceedings of the 9th Pacific Rim Conference on Multimedia, pp.663-674. 2008
  10. GiRyong Choi, Hye-Wuk Jung, and Jee-Hyoung Lee "Image-based Image Retrieval System Using Duplicated Point of PCA-SIFT", Journal of the Korean Institute of Intelligent System vol23. pp 190-279, 2013
  11. M. Wang , H. Li , D. Tao , K. Lu and X. Wu, "Multimodal graph-based reranking for Web image search", IEEE Transactions on Image Processing, vol. 21, no. 11, pp.4649-4661 2012 https://doi.org/10.1109/TIP.2012.2207397
  12. L. Page, S. Brin, R. Motwani, and T. Winograd, "The PageRank citation ranking: Bringing order to the web." Technical report, Stanford Digital Library Technologies Project, 1998.