An Emotion Recognition and Expression Method using Facial Image and Speech Signal

음성 신호와 얼굴 표정을 이용한 감정인식 몇 표현 기법

  • 주종태 (중앙대학교 전자전기공학부) ;
  • 문병현 (중앙대학교 전자전기공학부) ;
  • 서상욱 (중앙대학교 전자전기공학부) ;
  • 장인훈 (중앙대학교 전자전기공학부) ;
  • 심귀보 (중앙대학교 전자전기공학부)
  • Published : 2007.04.20

Abstract

본 논문에서는 감정인식 분야에서 가장 많이 사용되어지는 음성신호와 얼굴영상을 가지고 4개의(기쁨, 슬픔, 화남, 놀람) 감정으로 인식하고 각각 얻어진 감정인식 결과를 Multi modal 기법을 이용해서 이들의 감정을 융합한다. 이를 위해 얼굴영상을 이용한 감정인식에서는 주성분 분석(Principal Component Analysis)법을 이용해 특징벡터를 추출하고, 음성신호는 언어적 특성을 배재한 acoustic feature를 사용하였으며 이와 같이 추출된 특징들을 각각 신경망에 적용시켜 감정별로 패턴을 분류하였고, 인식된 결과는 감정표현 시스템에 작용하여 감정을 표현하였다.

Keywords