Journal of Broadcast Engineering (방송공학회논문지)

The Korean Institute of Broadcast and Media Engineers (한국방송∙미디어공학회)
권호 표지
DOI QR코드

DOI QR Code

An Efficient Error Compensation Method for Thumbnail Extraction in H.264/AVC Bitstreams

H.264/AVC 비트스트림으로부터 썸네일 추출 시 효율적인 오차 보상 방법

  • 윤명근 (광운대학교, VIA-멀티미디어 센터) ;
  • 이여송 (광운대학교, VIA-멀티미디어 센터) ;
  • 손채봉 (광운대학교, VIA-멀티미디어 센터) ;
  • 박호종 (광운대학교, VIA-멀티미디어 센터) ;
  • 안창범 (광운대학교, VIA-멀티미디어 센터) ;
  • 오승준 (광운대학교, VIA-멀티미디어 센터)
  • Published : 2008.09.30
Download PDF
⟨ Previous Next ⟩

Abstract

Recently, high definition media services like HDTV and IPTV are growing. A fast reduced-size image extracting method is required to meet what those services require. Conventional DC image extracting methods, however, can't be applied to H.264/AVC streams since a spatial domain prediction scheme is adopted in H.264/AVC intra mode. To solve this problem, a thumbnail extraction method in H.264/AVC was proposed. However, the method has mismatch problem which was caused by round-off operation in intra prediction and mismatch between integer and floating point calculation. In this paper, we propose an error compensation method for extracting thumbnail directly in H.264/AVC bitstreams. The compensation method introduces the mismatch problem in thumbnail extraction and presents compensation values. Through the implementation and performance evaluation, proposed method compensated round-off error efficiently in D1 and HD sequences while the additional extraction time is negligible.

최근에 H.264/AVC 표준을 이용하는 HDTV, IPTV와 같은 고화질 멀티미디어 서비스가 증가하고 있다. 이러한 고화질의 멀티미디어 서비스를 편리하게 이용하기 위해 축소 영상을 이용한 기술이 요구 된다. 그러나 H.264/AVC는 인트라 예측을 사용하기 때문에 종래 표준에 적용되던 주파수 공간에서 축소 영상을 추출하는 방법을 적용할 수 없다. 따라서 H.264/AVC 인트라 프레임으로부터 축소 영상을 주파수 공간에서 추출할 수 있는 방법이 제안되었다. 그러나 인트라 예측의 반올림 오차와 정수연산과 부동소수점 연산 사이에서의 불일치 문제로 인하여 썸네일의 화질을 저하시키는 문제점이 있다. 본 논문에서는 H.264/AVC 비트스트림으로부터의 썸네일 추출법에 대한 보상 방법을 제안한다. 제안하는 방법에서는 썸네일 추출 시 발생하는 오차에 대하여 분석하고, 통계적 모델을 통해 보상값을 제시한다. 실험결과를 통해 D1급 또는 HD급 영상에서 썸네일 영상의 화질을 효과적으로 보상함을 확인할 수 있으며, 속도 저하는 무시할 수 있다.

Keywords

References

  1. B. Yeo and B. Liu, "Rapid scene analysis on compressed video", IEEE Trans. Circuits and Systems for video Technology, vol. 5, no. 6, pp. 533-540, 1995 https://doi.org/10.1109/76.475896
  2. Wing-San Chau, Oscar C. Au, Tak-Song Chong, Tai-Wai Chan, Chi-Shun Cheung, "Efficient Scene Change Detection in MPEG Compressed Video Using Composite Block Averaged Luminance Image Sequence," IEEE ICICS, pp.688-691, 2005
  3. 윤자천, 설상훈, "압축영역에서 빠른 축소 영상 추출을 위한 다중부호 룩업테이블 설계," 한국방송공학회, vol. 10, no.3, pp.413-421, May 2005
  4. 김명준, 송병철, 장성규, 나종범, "변형된 IDCT 기저함수를 이용한 동영상 축소 전환 기법," 한국통신학회 논문지, 제24권, 제11B호, pp.2147-2153, Nov. 1999
  5. 김성득, 나종범, "압축된 동영상에서의 AC 예측 기법을 이용한 DC 영상 추출기법," 대한전자공학회 학술대회 논문집, 제21권 2호, pp.867-870, 2005
  6. N. Merhav and V. Bhaskaran, "Fast algorithms for DCT-domain image down-sampling and for inverse motion compensation," IEEE Trans. Circuits Syst. Video Technol., vol. 7, pp. 468-476, June 1997 https://doi.org/10.1109/76.585926
  7. Taskiran, C. Jau-Yuen Chen, Bouman, C.A. Delp, E.J. "A compressed video database structured for active browsing and search," IEEE image Processing, vol.3, pp.133-137, Oct. 1998
  8. Jung-Rim Kim, Sungjoo Suh, Sanghoon Sull, "Fast scene change detection for personal video recorder," IEEE Trans. Consumer Electronics, vol. 49, no. 3, pp. 683-688, Aug. 2003 https://doi.org/10.1109/TCE.2003.1233802
  9. Ja-Cheon Yoon, Hyeokman Kim, Seong Soo Chun, Jung-Rim Kim, Sanghoon Sull, "Real-Time Video Indexing System for Live Digital Broadcast TV Programs," Lecture Notes in Computer Science, CVIR2004, vol. 3115, pp. 261-269, Jul. 2004
  10. G.C. Feng and J. Jiang, "Image extraction in DCT domain," IEE Proc.-Vis. Image Signal Process., Vol. 150, No. 1, pp.20-27, Feb. 2003 https://doi.org/10.1049/ip-vis:20030157
  11. ITU-T Recommendation H.263. Video coding for low bitrate communication, Nov. 1995
  12. ISO/IEC, JTC1/SC29/WG11, Coding of moving pictures and associated audio for digital storage media at up to about 1,5Mbits/s -- Part 2: Video, FDIS 11172-2, June 1996
  13. ISO/IEC, JTC1/SC29/WG11, Information Technology-coding of audio-visual objects, Part 2: Video, FDIS 14496-2 Oct. 1998
  14. ISO/IEC, JTC1/SC29/WG11 (MPEG), Information technology - Generic coding of moving pictures and associated audio information: Video, Inter-national Standard 13818-2, ISO/IEC, 2000
  15. J. Song and B.L. Yeo, "Fast Extraction of Spatially Reduced Image Sequences from MPEG-2 Compressed Video," IEEE Trans. Circuits and Systems for Video Technology, vol. 9, no.7, pp. 1100-1114. Oct. 1999 https://doi.org/10.1109/76.795061
  16. Draft ITU-T Recommendation and Final Draft International Standard of Joint Video Specification (ITU-T Rec. H.264 | ISO/IEC 14496-10 AVC), 2003
  17. 권용광, 원치선 "DMB를 위한 요약영상 추출 알고리듬" 한국방송공학회, 제12권, 제5호, pp,525-534, Sep, 2007 https://doi.org/10.5909/JBE.2007.12.5.525
  18. 유상준, 윤명근, 김은석, 손채봉, 심동규, 오승준, "H.264/AVC 비트스트림에서 효율적으로 축소 영상을 추출하는 방법" 한국방송공학회, 제13권, 제2호, pp,222-235, Mar, 2008 https://doi.org/10.5909/JBE.2008.13.2.222
  19. Ping-Hao Wu, Chen Chen, and Hormer H. Chen "Rounding Mismatch Between Spatial - Domain and Transform-Domain Video Codecs", IEEE Trans. Circuits and Systems for Video Technology, vol. 16, no. 10, pp.1286-1293, Oct2006 https://doi.org/10.1109/TCSVT.2006.881855
  20. Chen Chen, Ping-Hao Wu and Chen H, "Transform-Domain Intra Prediction for H.264," IEEE ISCAS, pp.1497-1500, May 2005
  21. C. Chen, P.-H. Wu, and H. Chen, "MPEG-2 to H.264 transcoding," Picture Coding Symposium, Dec. 2004