DOI QR코드

DOI QR Code

Automatic Detection of Highlights in Soccer videos based on analysis of scene structure

축구 동영상에서의 장면 구조 분석에 기반한 자동적인 하이라이트 장면 검출

  • 박기태 (한양대학교 대학원 컴퓨터공학과) ;
  • 문영식 (한양대학교 컴퓨터공학과)
  • Published : 2007.02.28

Abstract

In this paper, we propose an efficient scheme for automatically detecting highlight scenes in soccer videos. Highlights are defined as shooting scenes and goal scenes. Through the analysis of soccer videos, we notice that most of highlight scenes are shown around the goal post area. It is also noticed that the TV camera zooms in a setter player or spectators after the highlight stones. Detection of highlight scenes for soccer videos consists of three steps. The first step is the extraction of the playing field using a statistical threshold. The second step is the detection of goal posts. In the final step, we detect a zooming of a soccer player or spectators by using connected component labeling of non-playing field. In order to evaluate the performance of our method, the precision and the recall are computed. Experimental results have shown the effectiveness of the proposed method, with 95.2% precision and 85.4% recall.

본 논문에서는 축구 동영상으로부터 자동적으로 하이라이트 장면들을 검출하는 방법을 제안한다. 축구 동영상에서 하이라이트 장면들은 슈팅 장면들이나 골 장면들로 정의 될 수 있다. 우리는 축구 동영상에 대한 구조적 분석을 통해서 일반적으로 골 포스트(goal posts) 영역 주위에서 하이라이트 장면들이 나타나는 것과 하이라이트 장면 이후에는 TV 카메라가 축구 선수들이나 관중석을 확대해서 보여주는 것을 확인할 수 있었다. 본 논문에서 축구 동영상으로부터 하이라이트 장면들을 검출하기 위한 과정은 세 단계로 구성된다. 첫 번째 단계는 통계적인 문턱치(statistical threshold)를 이용한 그라운드(playing field) 영역을 추출한다. 두 번째 단계는 골 포스트를 찾기 위해서 그라운드 영역과 그라운드가 아닌 영역들의 경계선 부분을 검출한다. 그리고 마지막 단계에서는 축구 선수나 관객들의 확대 장면을 검출하기 위해서 그라운드가 아닌 영역들에 대해서 connected component labeling 기법을 적용하여 한 장면 내에서 그라운드가 아닌 영역들의 비율을 계산한다. 본 논문에서는 하이라이트 장면 검출에 대한 성능을 평가하기 위하여 정확률(precision)과 재현율(recall)을 사용하고, 실험을 통하여 제안된 방법이 정확률 95.2%, 재현율 854%로 축구 동영상에서 하이라이트 장면을 효과적으로 검출할 수 있음을 확인하였다.

Keywords

References

  1. K. Wan, J. Lim, C. Xu, and X. Yu, 'Real-time Camera Field View Tracking in Soccer Video,' in Proceedings of IEEE ICASSP, Vol. 3, pp. 185-188, 2003 https://doi.org/10.1109/ICASSP.2003.1199138
  2. A. Ekin and A. Tekalp, 'Automatic Soccer Video Analysis and Summarization,' IEEE Trans. on Image Processing, Vol. 12, No.7, pp. 796-807, 2003 https://doi.org/10.1109/TIP.2003.812758
  3. K. Wan, X. Tan, X. Yu, and C. Xu, 'Real-time Goal-mouth Detection in MPEG Soccer Video,' in Proceedings of ACM MM2003, pp. 311-314, 200 https://doi.org/10.1145/957013.957079
  4. Y. Gong, L. T. Sin, C. H. Chuan, H. Zhang, M. Sakauchi, 'Automatic Parsing of TV Soccer Programs,' in Proceedings qf the International Conference on Multimedia Computing and Systems, pp. 167-174, 1995 https://doi.org/10.1109/MMCS.1995.484921
  5. V. Kobla and D. S. Doermann, 'Extraction of Features for Indexing MPEG Compression Video,' in Proceedings of IEEE First Workshop on Multimedia Signal Processing, pp. 337-342, 1997 https://doi.org/10.1109/MMSP.1997.602658
  6. 최송하, 이성환, '방송용 축구 경기 비디오의 자동 색인 및 분석 기술,' 한국정보과학회 가을 학술발표논문집, Vol. 25, No.2, pp. 550-552, 1998
  7. 황본우, 방건, 이미숙, 이성환, '축구 경기 비디오 분석을 위한 하이라이트 자동 추출 방법,' 한국정보과학회 가을 학술발표논문집, Vol. 24, No.2, pp. 347-350, 1997
  8. S. Dagtas and M. Abdel-Mottaleb, 'Extraction of TV Highlights Using Multimedia Features,' IEEE Fourth Workshop on Multimedia Signal Proceeding, pp. 91-96, 2001 https://doi.org/10.1109/MMSP.2001.962717
  9. 김재홍, 낭종호, 하명환, 정병희, 김경수, '스포츠 중계 방송의 특성을 이용한 축구동영상 하이라이트 생성 알고리즘,' 정보과학회 논문지 : 소프트웨어 및 응용 제30권 pp.727-843, 2003
  10. G. Pass, R. Zabih, and J. Miller, 'Comparing Image Using Color Coherence Vectors,' in Proceedings of ACM Multimedia 96, pp. 65-73, 1996 https://doi.org/10.1145/244130.244148