Real-Time Video Indexing and Non-Linear Video Browsing for DTV Receivers

디지털 텔레비전 수신환경에서의 실시간 비디오 인덱싱과 비선형적 비디오 브라우징

  • Published : 2002.06.01

Abstract

The fast advances in digital video processing and multimedia processing technology over the last decade enabled various non-linear video browsing techniques. Based on the machine-understanding of the video content, non-linear video brows ing interfaces such as key-frame based content summarization have been introduced. The key-frame based user interfaces, such as storyboard or table of content, however, are still very hard for conventional TV users to use, and are very hard to implement without the service providers providing additional information for the construction of the key-frame based interfaces. In this paper, non-linear video browsing techniques, which not only overcome previously described drawbacks but also are easy-to-use, and real-time video indexing technology to support the proposed browsing techniques are proposed. The structure-based skipping and skimming help users easily find interesting scene and understand the content in a very short time, using real-time video indexing technology.

지난 10여년간의 디지털 비디오와 관련 멀티미디어처리 기술의 빠른 발전은 비디오 내용의 이해에 기반한 키프레임 기반의 내용요약과 같은 여러 가지의 비선형적 비디오 브라우징 방법들을 가능하게 하였다. 그러나 스토리보드나 목차와 같은 키프레임 기반의 사용자 인터페이스들은 텔레비전 환경에 익숙한 대다수의 일반 사용자들에게는 여전히 사용하기 어렵다는 단점이 있으며, 이러한 사용자 인터페이스의 구성 또한 실시간 처리를 지원하지 않고 있어 서비스 제공자를 배제한 일반 방송 환경에서 사용하기 어렵다는 단점을 가지고 있다. 본 논문에서는 이러한 단점들을 극복하며 동시에 사용자들이 사용하기 편리한 비선형적 비디오 브라우징 기술들을 제안하며, 이를 지원하기 위한 실시간 비디오 인덱싱 기술을 제안하고 있다. 즉 구조기반의 건너뛰기와 요약보기 기능은 실시간 비디오 인덱싱 기술에 기반하여, 사용자들이 기존의 비디오 레코더의 리모콘과 같은 간단한 사용으로 원하는 장면을 쉽게 찾아갈 수 있도록 하여 주며, 간단한 요약 기능을 제공하여 짧은 시간에 전체의 내용을 이해할 수 있도록 하여 준다.

Keywords

References

  1. J. Meng, Y. Juan, and S. F. Chang, 'Scene Change Detection in a MPEG Compressed Video Sequence,' Proceeding of SPIE Vol. 2419, pp. 14-25, 1995
  2. Y. Rui, T. S. Hwang, and S. Mehrotra, 'Constructing Tableof- Content for Videos,' Multimedia Systems, Vol. 7, No. 5, Springer-Velag, pp. 359-368, 1999 https://doi.org/10.1007/s005300050138
  3. M. M. Yeung and B. L. Yeo, 'Video Content Characterization and Compaction for Digital Library Applications,' Proceedings of SPIE '97 Storage and Retrieval of Image and Video Database V, 1997
  4. A. Hanjalic, R. Lagendijk, and J. Biemond, 'Automated Segmentation of Movies into Logical Story Units,' IEEE Transactions on Circuits and Systems for Video Technology, 1996
  5. H. J. Zhang, S. Y. Tan, S. W. Smoliar, and G. Yihong, 'Automatic Parsing and Indexing of News Video,' Multimedia Systems, pp. 256-266, 1995
  6. Y. Rui, A. Gupta, and A. Acero, 'Automatically Extracting Highlights for TV Baseball Programs,' Proceedings of ACM Multimedia 2000, pp. 105-115, Oct., 2000
  7. Tivo Inc., http://www.tivo.com
  8. ReplayTV, http://replaytv.com
  9. E. Chamhi, and L. S. Kamhi, 'Simultaneous Recording and Playback Apparatus,' United States Patent No. 5930444, 1994
  10. S. B. Jun, K. Yoon, and H. Y. Lee, 'Dissolve Transition Detection Algorithm Using Spatio-Temporal Distribution of MPEG Macro-Block Types', Proceedings of ACM Multimedia 2000, pp. 391-394, Oct., 2000