Journal of Broadcast Engineering (방송공학회논문지)

The Korean Institute of Broadcast and Media Engineers (한국방송∙미디어공학회)
권호 표지
DOI QR코드

DOI QR Code

In-band Media Synchronization Mechanism Based on MMT Protocol for Hybrid Media Delivery

하이브리드 미디어 전송을 위한 MMT 프로토콜 기반의 대역내 미디어 동기화 기법

  • Won, Kwang-eun (Division of Computer and Telecommunications Engineering, Yonsei University) ;
  • Ahn, Eun-bin (Division of Computer and Telecommunications Engineering, Yonsei University) ;
  • Kim, Ayoung (Division of Computer and Telecommunications Engineering, Yonsei University) ;
  • Lee, Hong-rae (Division of Computer and Telecommunications Engineering, Yonsei University) ;
  • Seo, Kwang-deok (Division of Computer and Telecommunications Engineering, Yonsei University)
  • 원광은 (연세대학교 컴퓨터정보통신공학부) ;
  • 안은빈 (연세대학교 컴퓨터정보통신공학부) ;
  • 김아영 (연세대학교 컴퓨터정보통신공학부) ;
  • 이홍래 (연세대학교 컴퓨터정보통신공학부) ;
  • 서광덕 (연세대학교 컴퓨터정보통신공학부)
  • Received : 2018.12.03
  • Accepted : 2019.03.02
  • Published : 2019.03.30
Download PDF
⟨ Previous Next ⟩

Abstract

In ISO MPEG, MPEG-H has been standardized to smoothly deliver huge volume of ultra-high resolution videos over heterogeneous network environments for the consumers. In the MPEG-H standard, MMT(MPEG Media Transport) protocol is the next generation MPEG media transport technology to provide hybrid media delivery over heterogeneous environments. It is important to sustain accurate media synchronization to provide ultra-high resolution video services over heterogeneous network environments. In this paper, we propose and verify an in-band media synchronization scheme to circumvent the problem of additional session setup and excessive traffic problems of the conventional out-of-band media synchronization supported by the MMT technology.

ISO MPEG에서는 향후 대용량의 초고해상도 영상을 이종(Heterogeneous)의 네트워크 환경에서도 소비자에게 원활하게 전달하기 위해 MPEG-H를 표준화 하였다. 그 중 MMT(MPEG Media Transport) 프로토콜은 이종의 네트워크 환경에서 하이브리드 (hybrid) 미디어 전송을 할 수 있는 차세대 MPEG 미디어 전송 규격이다. 대용량 초고해상도의 영상을 이종의 네트워크 환경을 통해 원활하게 서비스하려면 전송된 미디어 간의 정확한 동기화 (synchronization)가 중요한 요소이다. 본 논문에서는 MMT 기술에서 제공하는 대역외 (out-of-band) 미디어 동기화 기법의 추가적인 세션 연결과 과도한 트래픽 발생 문제를 해결하기 위해 대역내 (in-band) 미디어 동기화 기법을 제안하고 그 성능을 검증한다.

Keywords

BSGHC3_2019_v24n2_299_f0001.png 이미지

그림 1. 단대단 (point-to-point) 단일 채널 송수신 모델에서의 MMT 기술의 적용 Fig. 1. Application of MMT to point-to-point transceiver model over a single channel

BSGHC3_2019_v24n2_299_f0002.png 이미지

그림 2. MMT MPU_timestamp_descriptor 메시지 기반의 미디어 동기화 원리 Fig. 2. Synchronization of MMT based on MPU_timestamp_descriptor message

BSGHC3_2019_v24n2_299_f0003.png 이미지

그림 3. 대역내 미디어 동기화를 위한 PTS 정보를 포함한 MMT 프로토콜 헤더의 구조 Fig. 3. MMT protocol header containing PTS for in-band media synchronization

BSGHC3_2019_v24n2_299_f0004.png 이미지

그림 4. 제안하는 오디오 및 비디오 스트림 간 동기화 동작 절차 Fig. 4. Proposed Synchronization process between audio and video streams

BSGHC3_2019_v24n2_299_f0005.png 이미지

그림 5. 화면간 시간 간격 조절을 통한 동기화 성능을 나타내는 그래프. Fig. 5. Synchronization performance achieved by adjusting inter-frame interval

BSGHC3_2019_v24n2_299_f0006.png 이미지

그림 6. 재동기화 지연 값에 따른 동기화 왜곡을 나타낸 그래프 Fig. 6. Synchronization skew affected by the resynchronization delay

References

  1. ISO/IEC 23008-1:2014 (First edition), Information technology High efficiency coding and media delivery in heterogeneous environments Part 1: MPEG media transport (MMT), Jun. 2014.
  2. Y. Sohn, M. Cho, and J. Paik, "Design of MMT-based broadcasting system for UHD video streaming over heterogenous networks," Journal of Broadcast Engineering, Vol. 20, No 1, pp. 16-25, Jan. 2015. https://doi.org/10.5909/JBE.2015.20.1.16
  3. Y. Hu, S. Xie, and Y. Xu, "Dynamic VR live streaming over MMT," in Proc. of IEEE Int. Symp. Broadband Multimedia Systems and Broadcasting (BMSB), pp. 11-16, 2017.
  4. S. Din and D., Bulterman, "Synchronization techniques in distributed multimedia presentation," in Proc. of Int. Conf. on Advances in Multimedia, pp. 1-9, 2012.
  5. C. Kim, H. Lee, T. Jung, B. Kim, and K. Seo, "An efficient delay-constrained ARQ scheme for MMT packt-based real-time video streaming over IP networks," Journal of Real-time Image Processing, Vol. 12, No. 2, pp. 257-271, Aug. 2016. https://doi.org/10.1007/s11554-015-0503-9