Multi-View Video Coding Using Illumination Change-Adaptive Motion Estimation and 2D Direct Mode

조명변화에 적응적인 움직임 검색 기법과 2차원 다이렉트 모드를 사용한 다시점 비디오 부호화

  • Lee, Yung Ki (Dept. of Internet Engineering, DMS Lab., Sejong University) ;
  • Hur, Jae Ho (Dept. of Internet Engineering, DMS Lab., Sejong University) ;
  • Lee, Yung Lyul (Dept. of Internet Engineering, DMS Lab., Sejong University)
  • 이융기 (세종대학교 인터넷공학과) ;
  • 허재호 (세종대학교 인터넷공학과) ;
  • 이영렬 (세종대학교 인터넷공학과)
  • Published : 2005.09.01

Abstract

A MVC (Multi-view Video Coding) method, which uses both an illumination change-adaptive ME (Motion Estimation)/DC (Motion Compensation) and a 2D (Dimensional) direct mode, is proposed. Firstly, a new SAD (Sum of Absolute Difference) measure for ME/MC is proposed to compensate the Luma pixel value changes for spatio-temporal motion vector prediction. Illumination change-adaptive (ICA) ME/MC uses the new SAD to improve both MV (Motion Vector) accuracy and bit saving. Secondly, The proposed 2D direct mode that can be used in inter-view prediction is an extended version of the temporal direct mode in MPEG-4 AVC. The proposed MVC method obtains approximately 0.8dB PSNR (Peak Signal-to-Noise Ratio) increment compared with the MPEG-4 AVC simulcast coding.

조명 변화에 적응적인 움직임 탐색 및 보상 방법과 2차원 다이렉트 모드 (2D Direct Mode)를 이용한 MVC (Multi-view Video Coding) 방법을 제안한다. 먼저, 공간적 및 시간적으로 인접한 영상으로부터 휘도 화소 값의 움직임 탐색 및 보상을 수행하기 위한 새로운 SAD (Sum of Absolute Difference) 측정 방법을 제안한다. 조명 변화에 적응적인 움직임 탐색 및 보상은 움직임 벡터의 정확도를 높이고, 비트의 절감을 위하여 새로운 SAD 계산식을 사용한다. 다음으로, 시점 간의 예측 시에 사용될 수 있는 2차원 다이렉트 모드는 MPEG-4 AVC의 시간적 다이렉트 모드 (Temporal Direct Mode)로부터 확장된 방식이다. 본 논문에서 제안된 MVC 방법은 MPEG-4 AVC의 Simulcast 부호화와 비교하여 약 0.8dB의 PSNR (Peak Signal-to-Noise Ratio) 향상을 보였다.

Keywords

References

  1. Yung-Lyul Lee and Woo-Chul Sung, 'Multi-view video coding using 2D direct mode,' ISO/IEC JTC1/SC29 WG11 m11266, Palma de Mallorca, Spain, October 2004
  2. T. Wiegand, Final draft international standard for joint video specification H.264, Joint Video Team (JVT) of ISO/IEC MPEG and ITU-T VCEG, JVT-G050, March 2003
  3. 'Call for Evidence on Multi-View Coding,' ISO/IEC JTC1/SC29/WG11 N6720, October 2004
  4. M. Flierl and B. Girod, 'Generalized B pictures and the draft JVT/H.264 video compression standard,' IEEE Trans. Circuits Syst. Video Technol., vol. 13, pp. 587597, July 2003
  5. H. Malvar, A. Hallapuro, M. Karczewicz, and L. Kerofsky, 'Low-Complexity transform and quantization in H.264/AVC,' IEEE Trans. Circuits Syst. Video Technol., vol. 13, pp. 598-603, July 2003 https://doi.org/10.1109/TCSVT.2003.814964
  6. Zhibo Chen, Peng Zhou, Yun He, 'Fast Motion estimation for JVT,' JVT-G016.doc, Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG, 7th meeting, Pattaya, TH, 5-13 March 2003
  7. http://bs.hhi.de/~suehring/tml/download/old_jm/jm76.zip
  8. 'Survey of algorithms used for Multi-view Video Coding (MVC),' ISO/IEC JTC1/SC29/WG11, N6909, HongKong, China, January 2005