Real-Time Video Quality Assessment of Video Communication Systems

비디오 통신 시스템의 실시간 비디오 품질 측정 방법

  • Published : 2009.05.25

Abstract

This paper presents a video quality assessment method based on quality degradation factors of real-time multimedia streaming services. The video quality degradation is caused by video source compression and network states. In this paper, we propose a blocky metric on an image domain to measure quality degradation by video compression. In this paper, the proposed boundary strength index for the blocky metric is defined by ratio of the variation of two pixel values adjacent to $8{\times}8$ block boundary and the average variation at several pixels adjacent to the two boundary pixels. On the other hand, unnatural image movement caused by network performance deterioration such as jitter and delay factors can be observed. In this paper, a temporal-Jerkiness measurement method is proposed by computing statistics of luminance differences between consecutive frames and play-time intervals between frames. The proposed final Perceptual Video Quality Metric (PVQM) is proposed by consolidating both blocking strength and temporal-jerkiness. To evaluate performance of the proposed algorithm, the accuracy of the proposed algorithm is compared with Difference of Mean Opinion Score (DMOS) based on human visual system.

본 논문에서는 실시간 멀티미디어 스트림 서비스에서 발생하는 비디오 품질 저하 요인에 따른 비디오 품질 측정 방법을 제안한다. 비디오 품질 저하에는 대표적으로 비디오 압축과 네트워크의 상태에 의해 발생한다. 본 논문에서는 비디오 압축에 의하여 생기는 화질 저하를 측정하기 위하여 공간 도메인에서 블록킹 왜곡에 대한 정도를 측정하는 방법을 제안한다. 제안하는 블록 경계 강도는 $8{\times}8$ 블록 경계에서 픽셀간의 변화와 경계를 제외한 주변영역에서 픽셀 사이의 변화에 대한 비율로 나타내었다. 반면, 움직임이 부자연스러운 동영상은 지터 및 지연 요소와 같은 네트워크 전송능력의 악화로 인해 비디오 품질 저하가 나타난다. 본 논문에서 제안하는 시간적 저키니스는 연속된 프레임의 대응되는 픽셀간의 밝기 값 차이에 대한 평균과 현재 프레임과 이전 프레임의 재생시간 간격의 평균 및 분산을 이용하는 방법을 제안하였다. 또한, 본 논문에서는 비디오 압축에 의한 품질 측정 방법인 블록 경계 강도와 네트워크에 의한 품질 측정 방법인 시간적 저키니스를 통합하여 비디오의 종합적 품질을 평가하는 Perceptual Video Quality Metric (PVQM)을 제안한다. 제안한 알고리즘의 성능을 평가하기 위하여, 사람이 직접 비디오 품질을 평가하는 Difference of Mean Opinion Score (DMOS)와 제안한 알고리즘을 비교 평가하였다. 그 결과 제안한 PVQM의 결과와 인간 시각에 의하여 평가된 DMOS가 근사함을 확인하였다.

Keywords

References

  1. ISO/IEC 1172-2, "Information technology - Generic coding of moving pictures and associated audio for digital storage media up to about 1.5 Mbits/s," MPEG-1, 1993
  2. ISO/IEC 13818-2, "Information technology - Generic coding of moving picture and associated audio information," MPEG-2, 1996
  3. ISO/IEC 14496-2, "Information technology - Generic coding of audiovisual objects, Part 2 : Visual," MPEG-4, 1999
  4. ITU-T Telecom, Standardization Sector of ITU, "Video codec of audio-visual service at p×64 kbits/s," Draft ITU-T Recommendation H.261, 1993
  5. ISO/IEC 13818, "Generic coding of moving pictures and associated audio information, Part 2 : Video," Draft ITU-T Recommendation H.262, 1994.(323)
  6. ITU-T Telecom, Standardization Sector of ITU, "Video voding for low bit rate communication," Draft ITU-T Recommendation H.263, 1998
  7. ISO/IEC 14496-10, "Information technology - Generic coding of audiovisual objects, Part 10 : Advanced video coding," ITU-T Recommendation H.264, Advanced video coding for generic audiovisual services, 2003
  8. R. Muijs and I. Kirenko, "A no-reference blocking artifact. measure for adaptive video processing," EUSIPCO 2005, 13rd Europ. Signal Processing Conference, Turkey, 2005
  9. P. Marziliano1, F. Dufaux, S. Winkler, and T. Ebrahimi “Perceptual blur and ringing metrics : application to JPEG2000," Signal Processing Image Communication, vol. 19, no. 2, pp. 163-172, Feb. 2004 https://doi.org/10.1016/j.image.2003.08.003
  10. ITU-T, "Objective perceptual video quality measurement techniques for digital cable television in the presence of a full reference," Recommendation ITU-T J.144, 2004
  11. ITU-T, "Subjective video quality assessment methods for multimedia applications," Recommendation ITU-T P.910, 2002
  12. ITU-R, "Methodology for the subjective assessment of the quality of television pictures," Recommendation ITU-R BT.500-10, 2000
  13. H. Schulzrinne, S. Casner, R. Frederick, and V. Jacobson, "RTP: A transport protocol for real-time applications," Internet Engineering Task Force, RFC1889, Jan. 1996
  14. H. Schulzrinne, S. Casner, R. Frederick, and V. Jacobson, "RTP: A transport protocol for real-time applications," Internet Engineering Task Force, RFC3550, July. 2003
  15. H. Schulzrinne, S. Casner, R. Frederick, and V. Jacobson, "RTP profile for audio and video conferences with minimal control," Internet Engineering Task Force, RFC3551, July. 2003
  16. 김병용, 이동진, 심동규, 권재철, "초저지연 비디오 통신을 위한 RTP 기반 립싱크 제어 기술에 관한 연구," 멀티미디어 학회, vol. 10, no. 8, pp.1039-1051, Aug. 2007
  17. Zhou Wang, Alan C. Bovik, and B. L. Evans, "Blind measurement of blocking artifacts in images,"  International Conference on Image Processing, vol. 3, pp. 10-13, Sept. 2000
  18. G. Iacovoni, S. Morsa, and R. Felice, "Quality-temporal transcoder driven by the jerkiness," in Proc. IEEE International Conference on Multimedia and Expo, pp. 1452-1455, Oct. 2005
  19. WANem 1.1 downloadable at http://linux.wareseeker.com/System/ wanem-1.1.zip/333493