Spatiotemporal Saliency-Based Video Abstract on a Smartphone

스마트폰에서의 시공간적 중요도기반 비디오 요약

  • Lee, Won Beom (School of Information and Communication Engineering, Inha University) ;
  • Park, In Kyu (School of Information and Communication Engineering, Inha University)
  • 이원범 (인하대학교 정보통신공학부) ;
  • 박인규 (인하대학교 정보통신공학부)
  • Published : 2012.07.05

Abstract

본 논문에서는 동영상을 시공간적 중요도 기반으로 요약하는 기법을 제안한다. 동영상 내에서 각 프레임의 중요도를 평가하여 높은 우선순위를 가지는 구간들의 집합으로 요약을 수행한다. 화면내의 얼굴면적의 비율, 영상의 복잡도를 통하여 각 프레임이 가지는 공간적 중요도를 분석하고 인접한 프레임간의 비교를 통해 밝기 히스토그램과 움직임(motion)의 양을 추정함으로써 시간적 중요도를 구한다. 에지 보존 스무딩 필터를 밝기 히스토그램에 적용하여 장면 전환을 검출한다. 분리된 장면들로 과분할 구조를 가지는 계층적 트리를 생성하여 사용자가 요구한 재생길이를 가지는 동영상을 자동으로 저작한다. 본 논문에서는 동영상 분석 및 저작을 제한적인 환경인 스마트폰에서 효과적으로 작동하도록 구현 및 최적화를 수행하였다.

Keywords