An MPEG-4 Contents Authoring System based on Temporal Constraints Model supporting User Interaction

사용자 상호작용 지원 시간 제약 모델 기반 MPEG-4 컨텐츠 저작 시스템

  • 김희선 (위덕대학교 컴퓨터멀티미디어공학부) ;
  • 김상욱 (경북대학교 컴퓨터과학과)
  • Published : 2003.04.01

Abstract

For temporal relations of interactive media such as MPEG-4, it is necessary for a temporal model that can update dynamically presentation time and temporal relations among objects by user events occurring during playback. Also, 811hough the temporal attributes are changed by user events, the validity of scene must be maintained. In this paper, we propose a temporal model that supports user interaction and developed an MPES-4 contents authoring system applying this model. We define the temporal relations of MPEG-4 that tan be authored and user interactions that can change the temporal properties. This authoring system defines the constraints on temporal relations and events and can generate the scene without error by checking the constraints. Also it provides the authoring environment to author visual]y temporal relations and events in MPEG-4 scene and generates the MPEG-4 stream by encoding the authored scene.

MPEG-4와 같은 대화형 미디어의 시간 관계를 위하여 재생 중에 사용자 이벤트에 의하여 객체간 재생 시간과 시간 관계를 동적으로 변화시킬 수 있는 시간 모델이 필요하다. 또한 사용자 이벤트에 의하여 시간 속성이 변경되더라도, 씬의 타당성이 유지되어야 한다. 본 논문에서는 사용자 상호작용을 지원하는 시간 모델을 제안하고, 이를 적용한 MPEG-4 컨텐츠 저작 시스템을 개발하였다. MPEG-4에서 저작 가능한 시간 관계와 시간속성을 변경시키는 사용자 상호작용을 정의하였다. 본 저작 시스템은 시간 관계와 이벤트에 대한 제약 조건을 정의하고, 제약 조건을 검사하여 오류 없는 씬(scene)을 생성할 수 있다. 또한 MPEG-4 씬에 시간관계와 이벤트를 시각적으로 저작하기 위한 저작 환경을 제공하고, 저작된 씬을 인코딩 하여 MPEG-4 스트림을 생성한다.

Keywords

References

  1. 차경애,김희선, 김상욱, 'MPEG-4 컨텐츠 저작 시스템 설계 및 개발,' 정보과학회 논문지 : 컴퓨팅의 실제, 제 7권, 제 4호, pp. 309-315, 2001
  2. A. Puri and A. Eleftheriadis, 'MPEG-4 : An object-based multmedia coding standard supporting mobile application,' Mobile Networks and Application 3, pp. 5-32, 1998 https://doi.org/10.1023/A:1019160312366
  3. J. F. Allen, 'Maintaining Knowledge about Temporal Intervals,' Communications of the ACM, Vol. 25, No. 11, pp. 832-843, 1983 https://doi.org/10.1145/182.358434
  4. T. D. C. Little and A. Ghafoor, 'Synchronization and Storage Models for Multimedia Objects,' IEEE Journal on Selected Areas in Communications, vol. 8, no. 3, pp. 413-427, 1990 https://doi.org/10.1109/49.53017
  5. B. Prabhakaran and S. V. Raghavan, 'Synchronization Models for Multimedia Presentation with User Participation,' Proceedings of the First ACM International Conference on Multimedia, pp. 157-163, 1993 https://doi.org/10.1007/BF01274180
  6. S. Shinji, M. Toshio, F. Kazutoshi, N. Shojiro, M. Hideo, 'A New Hyperobject System Harmony : Its Design and Implementation,' Multimedia Information Systems, 1991
  7. VRML 97, ISO/IEC DIS 14772-1, 1997
  8. Information Technology-Coding of Audio-Visual Objects-Part 1 : Systems, ISO/IEC 14496-1, ISO/IEC JTC 1/SC 29/WG 11, 1998
  9. Synchronized Multimedia Integration Language(SMIL) 1.0 Specification, W3C Recommendation, http://www.w3.org/TR/REC -smil, 1998
  10. S. Boughoufalah, J. Dufourd and F. Bouihaguet, 'MPEG-Pro, an Authoring System for MPEC-4 with Temporal Constraints and Template Guided Editing,' Proceedings of the 2000 IEEE International Conference on Multimedia and Expo, 2000 https://doi.org/10.1109/ICME.2000.869572
  11. MPEG-4 Authoring Meeting, Acts Concertation, http://www.infowin.org/ACTS/Analysis/Concertation/Multimedia/Reports/mpeg.htm, 1999