Comparative Analysis of Deep Learning Based Frame Interpolation Methods for HD Videos and Patch-wise Training Methods

딥러닝 기반 비디오 보간법의 패치 단위 학습과 고해상도 비디오를 이용한 비교 분석 실험

  • Kim, Nayoung (Department of Electronic and Electrical Engineering, Ewha Womans University) ;
  • Kang, Je-Won (Department of Electronic and Electrical Engineering, Ewha Womans University)
  • 김나영 (이화여자대학교, 전자전기공학과) ;
  • 강제원 (이화여자대학교, 전자전기공학과)
  • Published : 2018.06.20

Abstract

본 논문에서는 딥러닝을 활용한 비디오 보간법(video interpolation)에 대한 최근 모델들을 HD 급 비디오로 학습시키는 방법과 평가 성능을 비교 분석하는 것을 목표로 한다. 기존의 딥러닝을 활용한 비디오 보간법에 대해 제안된 모델들은 낮은 해상도의 비디오로 실험을 진행하였다. 반면 본 연구에서는 한정된 메모리를 가지고도 높은 해상도의 비디오를 학습시키기 위해서 패치 단위 데이터 셋을 구성하여 학습을 진행하였다. 평가 성능을 보이기 위해서 학습 데이터와 마찬가지로 패치 단위 평가와 전체 프레임 단위 평가 성능의 결과를 비교한다.

Keywords