Key VOP by Shape in MPEG-4 Compressed Domain

MPEG-4 압축 영역에서 형상을 이용한 키 VOP 선정

  • 한상진 (㈜에어코드 기술 연구소) ;
  • 김용철 (서울시립대학교 컴퓨터비젼연구실)
  • Published : 2003.06.01

Abstract

We propose a novel method of selecting key VOPs from MPEG-4 compressed domain without fully decoding the compressed data. Approximated shapes of VOPs are obtained from the shape coding mode and then VOPs are clustered by shape similarity to generate key VOPs. The proposed method reduces the computation time of shape approximation, compared with Erol's method. Nevertheless, the resulting VOPs have a good summarizing capability of a video sequence. NMHD (normalized mean Hausdorff distance) values are 2-means clustered to generate key VOPs. In the video search, the MHD of a query VOP from key VOPs are computed and the VOP with the lowest distance is returned. Tests on standard MPEG-4 test sequences show that the computational complexity is very low. Recursive clustering proved to be very effective for generating suitable key VOPs.

본 논문에서는 MPEG-4 동영상을 완전히 디코딩하지 않은 상태에서 근사화된 형상 정보를 추출하여 형상의 유사도에 의해 VOP를 클러스터링 하여 VO의 동작을 요약, 검색하는 새로운 방법을 제안한다. 제안하는 형상 추출방법은 Erol의 방법을 단순화한 것으로서, 키 VOP 형상의 정확도는 개선되면서도 실행시간은 감소한다. 제안하는 방법에서는 근사화된 형상 사이의 유사도를 Normalized Mean Hausdorff Distance로 구하며, 이를 2-means 클러스터링하여 VOP를 선정한다. VOP 검색은 질의 형상과 키 VOP의 형상 사이의 Mean Hausdorff Distance를 계산하여 가장 일치하는 키 VOP를 선택하는 방식으로 이루어진다. 제안하는 방법을 표준 MPEG-4 테스트 영상 열에 대해 시험한 결과, 기존의 방법에 비해 근사화된 형상 정보를 더 짧은 시간에 얻을 수 있고, 재귀적 클러스터링 방법을 사용하여 키 VOP들의 정확도도 개선되었다.

Keywords

References

  1. ACM Conference on Multimedia Comparing Image Using Color Coherence Cectors G.Pass(et al.)
  2. Information technology-Generic coding of moving pictures and associated audio information ISO/IEC
  3. Multimedia, IEEE Trans. Automatic Key Video Plane Selection Using the Shape Information in the MPEG-4 Compressed Domain B.Erol;F.Kossentini
  4. IEEE 7th ICECS Retrieval of Video Objects by Compressed Domain Shape Features B.Erol;F.Kossentini
  5. IEEE ICIP Moving Visual Representations of Video Objects for Content-Based Search and Browsing B.Gunsel;A.Murat Tekalp;van Beek;P.J.L.
  6. MPEG-4 Video Verification Model version 18 ISO/IEC
  7. ICIP Effective Content Representation for video A.Ferman
  8. ICIP Group-of-Frames/Pictures Color Histogram Descriptors for Multimedia Applications A.Ferman(et al.)
  9. IEEE, ICIP A High-Performance Shot Boundary Detection Algorithm Using Multiple Cues M.Naphade(et al.)
  10. ICIP Content-based Video Abstraction B.Gunsel;A.Tekalp
  11. IEEE, ICIP 98 Adaptive Key Frame Extraction Using Unsupervised Clustering Y.Zhuang(et al.)
  12. ICASSP Abrupt shot change detection using an unsupervised clustering of multiple features H.Lee(et al.)
  13. IPIC New Hausdorff Distances Based on Robust Statistics for Comparing Images K.Oh(et al.)
  14. MPEG-4 video encoder/decoder ISO/IEC
  15. ISO