Aesthetic Feature-based Activity Summarization for Senior Life Logging

시니어 라이프 로깅을 위한 심미적 특징 기반의 행동 요약 시스템

  • Kim, Seondae (Department of Computer Engineering, Gachon University) ;
  • Ryu, Il-Woong (Department of Computer Engineering, Gachon University) ;
  • Ryu, Jaesung (Department of Computer Engineering, Gachon University) ;
  • Mujtaba, Ghulam (Department of Computer Engineering, Gachon University) ;
  • Park, Eunsoo (Department of Computer Engineering, Gachon University) ;
  • Kim, Seunghwan (Department of Computer Engineering, Gachon University) ;
  • Ryu, Eun-Seok (Department of Computer Engineering, Gachon University)
  • Published : 2019.06.19

Abstract

본 논문은 시니어 라이프 로깅을 위한 데이터베이스를 효과적으로 구축하기 위해 영상의 심미적 특징을 통한 행동 별 영상 요약을 소개한다. 실내의 TV 앞에서 오랜 시간을 보내는 시니어의 상태를 체크하기 위해 일반 카메라 또는 360 카메라를 통해 HD 급 화질 이상의 영상을 주기적으로 수집하고, 이를 머신러닝 또는 딥러닝 기반의 행동인식 시스템에 이용하기 위한 전처리 단계에 응용할 수 있는 방법을 서술한다. 이 연구에서는 영상 데이터에서 얻을 수 있는 색상을 이용한 HSV 히스토그램, 영상신호의 Jitter 를 줄이는 고정도, 움직임 에너지 등을 이용하여 짧은 시간 내에 행동별로 구분된 영상(샷, shot)을 자르고 요약하는 방법을 서술한다.

Keywords