Proceedings of the Korean Institute of Information and Commucation Sciences Conference (한국정보통신학회:학술대회논문집)

The Korea Institute of Information and Commucation Engineering (한국정보통신학회)
권호 표지

System implementation share of voice and sign language

지화인식 기반의 음성 및 SNS 공유 시스템 구현

  • Kang, Jung-Hun (Department of Information and Communication Engineering, Namseoul University) ;
  • Yang, Dea-Sik (Department of Information and Communication Engineering, Namseoul University) ;
  • Oh, Min-Seok (Department of Information and Communication Engineering, Namseoul University) ;
  • Sir, Jung-Wook (Department of Information and Communication Engineering, Namseoul University)
  • 강정훈 (남서울대학교 정보통신공학과) ;
  • 양대식 (남서울대학교 정보통신공학과) ;
  • 오민석 (남서울대학교 정보통신공학과) ;
  • 서정욱 (남서울대학교 정보통신공학과)
  • Published : 2016.10.27
Download PDF
⟨ Previous Next ⟩

Abstract

Deaf are it is difficult to communicate to represent the voice heard, so theay use mostly using the speech, sign language, writing, etc. to communicate. It is the best way to use sign language, in order to communicate deaf and normal people each other. But they must understand to use sign language. In this paper, we designed and implementated finger language translation system to support communicate between deaf and normal people. We used leap motion as input device that can track finger and hand gesture. We used raspberry pi that is low power sing board computer to process input data and translate finger language. We implemented application used Node.js and MongoDB. The client application complied with HTML5 so that can be support any smart device with web browser.

본 논문에서는 청각 장애인은 소리를 듣고 음성으로 표현하는 의사소통에 어려움이 있기 때문에 주로, 구화, 수화, 필담 등을 이용하여 의사소통을 진행한다. 청각 장애인과 건청인과의 의사소통을 위해서는 수화가 가장 좋은 방법이지만 수화 사용방법을 이해해야만 하는 어려움이 따른다. 청각 장애인과 건청인간의 의사소통을 위한 수단으로 지화번역 시스템을 설계 및 구현 하였다. 지화 입력 수단 으로는 손가락 모양과 손동작을 추적 할 수 있는 립 모션을 사용하였다. 입력된 정보를 처리하고 번역하기 위해서 저전력 싱글 보드 컴퓨터인 라즈베리 파이를 활용 하였다.

Keywords