Analysis of Camera Operation in MPEG2 Compressed Domain Using Generalized Hough Transform Technique

일반화된 Hough 변환기법을 이용한 MPEG2 압축영역에서의 카메라의 움직임 해석

  • 유원영 (전북대학교 대학원 전자공학과) ;
  • 최정일 (전북대학교 대학원 전자공학과) ;
  • 이준환 (전북대학교 전자공학과)
  • Published : 2000.11.01

Abstract

In this paper, we propose an simple and efficient method to estunate the camera operation by using compressed information, which is extracted diracily from MPEG2 stream without complete decoding. In the method, the motion vector is converted into approximate optical flow by using the feature of predicted frame, because the motion vector in MPEG2 video stream is not regular sequene. And they are used to estimate the camera operation, which consist of pan, and zoom by Hough transform technique. The method provided better results than the least square method for video stream of basketball and socer games. The proposed method can have a reduced computational complexity because the information is directiv abtained in compressed domain. Additionally it can be a useful technology in content-based searching and analysis of video information. Also, the estimatd cameral operationis applicable in searching or tracking objects in MPEG2 video stream without decoding.

본 논문에서는 MPEG2 비디오 스트림에서 완전한 복호화 과정없이 직접 얻을 수 있는 압축 정보들을 이용하고 간단하고 효과적인 카메라 움직임(Camera Operation) 정보 추출방법을 제안하였다. 제안된 방법은 순서적이지 못한 움직임 벡터를 갖는 MPEG2 비디오 스트림에서, 선지식으로 알고있는 예측 프레임들의 속성을 이용하여 움직임 벡터(motion Vector)로부터 광 플로우(optical flow)를 추출하였으며, 일반화된 Hough 변환기법 이용하여 카메라 움직임 모델의 기본 요소인 팬(Pan), 틸트(Tilt), 줌(Zoom) 등을 근사적으로 추정하였다. 제안된 방법은 농구경기 및 축구경기 비디오에 대해 적응하여 기존의 최소자승방법(Least Mean Square) 방법보다 양호한 실험결과를 얻을 수 있었다. 제안된 카메라 움직 추정은 비디오 스트림에서 직접 정보를 얻음으로써 계산속도의 향상은 물론, 카메라의 움직임을 활용하는 내용기반의 비디오 검색 및 분석에서 유용한 요소 기술이 되리라고 기대된다. 또한 MPEG2 비디오 스트림에서 이러한 개발 기술들은 압축영상을 복호화 하지않고 객체들의 움직임만을 탐색하거나 추적하는데 활용될 것으로 예상된다.

Keywords

References

  1. V Kobla, and D Doermann. 'Compressed domain video mdexing techniques using DCT and motion vector information in MPEG video,' Storage and Retrieval for Image and Video Databases V, SPIE Vol.3022. pp,200-211, Jan 1997 https://doi.org/10.1117/12.263408
  2. O. N. Gerek, Y, Altunhasak, 'Key Frame Selection from MPEG Video Data.' VCIP, SPIE Vo1.3024, pp.920-925. 1997 https://doi.org/10.1117/12.263304
  3. J. Meng, Y. Juan. S-F Chang. 'Scene Change Detection in a MPEG Compressed Video Sequence.' Digital Video Compression: Algorithms and Technologies. SPIE Vol 2419, pp, 14 - 25, 1995 https://doi.org/10.1117/12.206359
  4. Y Ariki, Y Saito, 'Extraction of TV News Articles Based on Scene Cut Detection Using DCT Clustering,' ICIP 96, Vol 3, pp.847-850, 1996 https://doi.org/10.1109/ICIP.1996.560881
  5. Marco la Cascia, Edoardo Ardizzone, 'JACOB: Just a Content-Based Query System for Video Databases,' ICASSP'96, Vol. 2, pp 1216-1219, May 1996 https://doi.org/10.1109/ICASSP.1996.543585
  6. Ramesh Jain, Rangachar Kasturi and Brian G Schunck, 'Machine Vision', McGraw-Hill, 1995
  7. Saur Drew D, Tan Yap-Peng, Kulkarm Sanjeev R Ramadge Peter J, 'Automated Analysis and Annotation of Basketball Video,' Storage and Retrieval Image and Video Databases V SPIE Vol 3022, pp,176- 187, Jan 1997 https://doi.org/10.1117/12.263406
  8. ISO-IEC13812-1/ISO-IEC13812-2 lnternational Standards, lst Ed, 1996
  9. Keith Jack, 'Video Demystified A Handbook for the Digital Engineer', 2nd Ed .. Hightext Interactive. 1996
  10. R. Milanese, F. Deguillaume, A Jacot-Descombes, 'Efficient Segmentation and Camera Motion Indexing at Compressed Video,' Real-Time Imaging, Vol.5, No, 4, pp.231-241, Aug 1999
  11. Maurizio Pilu, 'On using raw MPEG motion vectors to determine global camera motion,' Visual Communications and Image Processing '98, SPIE Vol,3309 pp448-459, Jan 1998
  12. P. Sobey, M. V. Srinvansan, 'Measurement of Optical Flow by Generalized Gradient Scheme,' J. Opt Soc Am. A, Vol 8 No.9, pp.1488-1498, 1991
  13. Isaac Cohen, Gerard Medioni, 'Dctection and Tracking of Objects in Airborne Video Imagery', CVPR'98 ' Workshop on Interpretation of Visual Motion, 1998. http://iris use edu/home/ravcharles/_Mosaic/Outlipes/Papers.html
  14. A Murat Tekalp, 'Digital Video Processing', Prentice Hall, 1995