Proceedings of the Korean Society of Computer Information Conference (한국컴퓨터정보학회:학술대회논문집)

Korean Society of Computer Information (한국컴퓨터정보학회)
권호 표지

Action recognition, hand gesture recognition, and emotion recognition using text classification method

Text classification 방법을 사용한 행동 인식, 손동작 인식 및 감정 인식

  • Kim, Gi-Duk (Dept. of Electricity and Electronic Computer Engineering, Pusan National University)
  • 김기덕 (부산대학교 전기전자컴퓨터공학과)
  • Published : 2021.01.20
Download PDF
⟨ Previous Next ⟩

Abstract

본 논문에서는 Text Classification에 사용된 딥러닝 모델을 적용하여 행동 인식, 손동작 인식 및 감정 인식 방법을 제안한다. 먼저 라이브러리를 사용하여 영상에서 특징 추출 후 식을 적용하여 특징의 벡터를 저장한다. 이를 Conv1D, Transformer, GRU를 결합한 모델에 학습시킨다. 이 방법을 통해 하나의 딥러닝 모델을 사용하여 다양한 분야에 적용할 수 있다. 제안한 방법을 사용해 SYSU 3D HOI 데이터셋에서 99.66%, eNTERFACE' 05 데이터셋에 대해 99.0%, DHG-14 데이터셋에 대해 95.48%의 클래스 분류 정확도를 얻을 수 있었다.

Keywords