A Semantic-based Video Retrieval System using Method of Automatic Annotation Update and Multi-Partition Color Histogram

자동 주석 갱신 및 멀티 분할 색상 히스토그램 기법을 이용한 의미기반 비디오 검색 시스템

  • 이광형 (숭실대학교 컴퓨터공학과 통신연구실) ;
  • 전문석 (숭실대학교 컴퓨터공학과)
  • Published : 2004.08.01

Abstract

In order to process video data effectively, it is required that the content information of video data is loaded in database and semantic-based retrieval method can be available for various query of users. In this paper, we propose semantic-based video retrieval system which support semantic retrieval of various users by feature-based retrieval and annotation-based retrieval of massive video data. By user's fundamental query and selection of image for key frame that extracted from query, the agent gives the detail shape for annotation of extracted key frame. Also, key frame selected by user become query image and searches the most similar key frame through feature based retrieval method that propose. From experiment, the designed and implemented system showed high precision ratio in performance assessment more than 90 percents.

비디오 데이터를 효율적으로 처리하기 위해서는 비디오 데이터가 가지고 있는 내용에 대한 정보를 데이터베이스에 저장하고 사용자들의 다양한 질의를 처리할 수 있는 의미기반 검색 기법이 요구된다. 본 논문에서는 주석기반 검색과 특징기반 검색을 이용하여 대용량의 비디오 데이터에 대한 사용자의 다양한 의미검색을 지원하는 에이전트 기반에서의 자동화되고 통합된 비디오 의미기반 검색 시스템을 제안한다. 사용자의 기본적인 질의와 질의에 의해 추출된 키 프레임의 이미지를 선택함으로써 에이전트는 추출된 키 프레임의 주석에 대한 의미를 더욱 구체화시킨다. 또한, 사용자에 의해 선택된 키 프레임은 질의 이미지가 되어 제안하는 특징기반 검색기법을 통해 가장 유사한 키 프레임을 검색한다. 설계하고 구현한 시스템은 실험을 통한 성능평가에서 90% 이상의 높은 정확도를 보였다.

Keywords

References

  1. Multimedia System The Advanced Video Information System : data structure and query processing Sobel Adali(et al.)
  2. IEEE Multimedia v.9 no.3 Applications of video-content analysis and retrieval N. Dimitrova;A. Zakhor;T.Huang https://doi.org/10.1109/MMUL.2002.1022858
  3. IEEE Trans on Multimedia v.04 no.04 Clustering and retrieval of video shots through temporal slices analysis C.W. Ngo;T.C. Pong;H.J. Zhang https://doi.org/10.1109/TMM.2002.802022
  4. IEEE Multimedia v.7 no.1 Video modeling using strata-based annotation M.S. Kankangalli;T.S. Chua
  5. IEEE Computer v.28 no.9 Query by Image and Video Content : The QBIC system Myron Flickner(et al.)
  6. ACM Multimedia VisualSEEK: a fully automated content-based image query system J. R. Smith;S.F. Chang
  7. IEEE Multimedia'96 A Content Based Query Language for Video Database Tony C.T. Kuo;Arbee L. P. Chen
  8. Multimedia System the Advanced Video Information System:data structures and query processing Sibel Adali(et al.)
  9. Ph.D. Thesis, Norwegian Institute of Technology VideoSTAR-A Database for Video Information Sharing R. Hjelsvold
  10. ACM TOIS v.8 no.2 New Techniques for Best-match Retrieval D. Shasha;T.L. Wang https://doi.org/10.1145/96105.96111