Korean Phonological Viseme for Lip Synch Based on Phoneme Recognition

음소인식 기반의 립싱크 구현을 위한 한국어 음운학적 Viseme의 제안

  • Joo Heeyeol (Department of Electronics Engineering, Korea University) ;
  • Kang Sunmee (Department of Computer Science, Seokyeong University) ;
  • Ko Hanseok (Department of Electronics Engineering, Korea University)
  • Published : 1999.07.01

Abstract

본 논문에서는 한국어에 대한 실시간 음소 인식을 통한 Lip Synch 구현에 필수요소인 Viseme(Visual Phoneme)을 한국어의 음운학적 접근 방법을 통해 제시하고, Lip Synch에서 입술의 모양에 결정적인 영향을 미치는 모음에 대한 모음 인식 실험 및 결과 분석을 한다.모음인식 실험에서는 한국어 음소 51개 각각에 대해 3개의 State로 이루어진 CHMM (Continilous Hidden Makov Model)으로 모델링하고, 각각의 음소가 병렬로 연결되어진 음소네트워크를 사용한다. 입력된 음성은 12차 MFCC로 특징을 추출하고, Viterbi 알고리즘을 인식 알고리즘으로 사용했으며, 인식과정에서 Bigrim 문법과 유사한 구조의 음소배열 규칙을 사용해서 인식률과 인식 속도를 향상시켰다.

Keywords