• Title/Summary/Keyword: 바이모달 시스템

Search Result 45, Processing Time 0.027 seconds

Performance Comparison and Verification of Lip Parameter Selection Methods in the Bimodal Speech ]Recognition System (입술 파라미터 선정에 따른 바이모달 음성인식 성능 비교 및 검증)

  • 박병구;김진영;임재열
    • The Journal of the Acoustical Society of Korea
    • /
    • v.18 no.3
    • /
    • pp.68-72
    • /
    • 1999
  • The choice of parameters from various lip information and the robustness of extracting lip parameters play important roles in the performance of bimodal speech recognition system. In this paper, lip parameters are extracted by using an automatic extraction algorithm and inner lip parameters effect on the recognition rate more than outer lip parameters. Compared with a manual extraction algorithm, the automatic extraction method is evaluated about its robustness.

  • PDF

Design and Implementation of Bimodal System using Face and Audio (얼굴과 음성 정보를 이용한 바이모달 시스템 설계 및 구현)

  • Kim, Myung-Hun;Lee, Chi-Geun;Jung, Sung-Tae
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2005.11a
    • /
    • pp.701-704
    • /
    • 2005
  • 최근 들어 바이모달 인식에 관한 연구가 활발히 진행되고 있다. 본 논문에서는 음성과 얼굴을 이용하여 바이모달 시스템을 구현하였다. 얼굴인식은 객체 분류 기법인 SVM을 이용하여 얼굴을 검출 및 인식하였으며, 음성인식은 HMM을 이용하여 음성인식을 하였다. 각기 인식된 결과에 대해 합성을 통하여 잡음에 의해 낮아지는 음성 인식률을 얼굴 인식과 같이 사용함으로서, 전체적인 인식률 향상을 볼 수 있다.

  • PDF

Development of Real-Time Simulator Program for Bimodal Tram (바이모달 트램의 실시간 시뮬레이터 프로그램 개발)

  • Yun, Kyong-Han;Kim, Young-Chol;Lee, Yong-Sang;Jung, Hae-Bong;Byun, Yeun-Sub
    • Proceedings of the KIEE Conference
    • /
    • 2009.07a
    • /
    • pp.1753_1754
    • /
    • 2009
  • 본 논문은 한국 철도기술연구원에서 바이모달 트램의 안내/추진/도킹 제어기 검증을 위해 제작중인 LabVIEW, PXI기반의 실시간 시뮬레이터를 위한 시뮬레이션 프로그램 개발에 대한 내용을 다루었다. 시뮬레이터 프로그램은 바이모달 트램의 비선형 동적모델, 위치추정필터, 안내/추진/도킹 제어기로 구성되며, 비선형 동적모델에는 실제 차량에서 제어기나 관측기에 사용되는 각종 측정값들을 모사하기 위한 센서 계측시스템이 포함된다.

  • PDF

Effects of Extraction Method and Choice of Lip Parameters on the Bi-modal Speech Recognition (입술정보추출 및 파라미터 선정 방법에 따른 바이모달 음성인식 성능 비교)

  • 박병구
    • Proceedings of the Acoustical Society of Korea Conference
    • /
    • 1998.06e
    • /
    • pp.347-350
    • /
    • 1998
  • 음성신호와 영상신호를 함께 이용하는 바이모달(Bi-modal)음성인식에서 어떤 입술 파라미터를 사용하는가에 따라 인식시스템의 성능이 달라진다. 그래서 본 논문에서는 이미지에 근거한 입술파라미터를 견인하게 추출하기 위한 방법으로 x 프로파일(profile)을 이용한 방법을 사용하였다. 파라미터를 선정을 달리하여 실험한 결과 15dB이상에서는 안쪽입술의 2개의 파라미터를 이용한 경우가, 10dB이하에서는 4개의 입술파라미터를 이용한 경우가 더 좋은 인식률을 보였다. 안쪽 입술 파라미터를 이용한 경우가 바깥쪽 입술 파라미터를 이용한 경우보다 더 좋은 인식률을 보였다.

  • PDF

Design and Implementation of a Bimodal User Recognition System using Face and Audio (얼굴과 음성 정보를 이용한 바이모달 사용자 인식 시스템 설계 및 구현)

  • Kim Myung-Hun;Lee Chi-Geun;So In-Mi;Jung Sung-Tae
    • Journal of the Korea Society of Computer and Information
    • /
    • v.10 no.5 s.37
    • /
    • pp.353-362
    • /
    • 2005
  • Recently, study of Bimodal recognition has become very active. In this paper we propose a Bimodal user recognition system that uses face information and audio information. Face recognition consists of face detection step and face recognition step. Face detection uses AdaBoost to find face candidate area. After finding face candidates, PCA feature extraction is applied to decrease the dimension of feature vector. And then, SVM classifiers are used to detect and recognize face. Audio recognition uses MFCC for audio feature extraction and HMM is used for audio recognition. Experimental results show that the Bimodal recognition can improve the user recognition rate much more than audio only recognition, especially in the Presence of noise.

  • PDF

A Speed Increasing Test of BIMODALTRAM for Dynamic Response Analysis of Pipe-truss Bridges (파이프 트러스교의 동적특성 분석을 위한 바이모달트램 주행실험연구)

  • Kim, Hee-Ju;Jun, Myung-Il;Cho, Eun-Sang;Hwang, Won-Sup
    • Journal of the Korean Society for Railway
    • /
    • v.14 no.2
    • /
    • pp.137-142
    • /
    • 2011
  • A bimodal tram is a new design vehicle introduced to improve a current transportation system, and it has advantages of a bus and a subway. A pipe truss bridge, an exclusive road of the bimodal tram, is constructed for introduction of the bimodal tram. An analysis of dynamic response characteristics is required because this new bridge has never constructed before. A speed increasing test on the pipe truss bridge was conducted with attaching a sensor to bottom of the bridge. Also, Dynamic response characteristics were analyzed by measuring displacements, the maximum vertical and horizontal acceleration about the new bridge through the experiment.

A Study on the Recognition System of Faint Situation based on Bimodal Information (바이모달 정보를 이용한 기절상황인식 시스템에 관한 연구)

  • So, In-Mi;Jung, Sung-Tae
    • Journal of Korea Multimedia Society
    • /
    • v.13 no.2
    • /
    • pp.225-236
    • /
    • 2010
  • This study proposes a method for the recognition of emergency situation according to the bimodal information of camera image sensor and gravity sensor. This method can recognize emergency condition by mutual cooperation and compensation between sensors even when one of the sensors malfunction, the user does not carry gravity sensor, or in the place like bathroom where it is hard to acquire camera images. This paper implemented HMM(Hidden Markov Model) based learning and recognition algorithm to recognize actions such as walking, sitting on floor, sitting at sofa, lying and fainting motions. Recognition rate was enhanced when image feature vectors and gravity feature vectors are combined in learning and recognition process. Also, this method maintains high recognition rate by detecting moving object through adaptive background model even in various illumination changes.