DOI QR코드

DOI QR Code

The Study on Dynamic Images Processing for Finger Languages

지화 인식을 위한 동영상 처리에 관한 연구

  • 강민지 (동명정보대학교 정보통신공학과) ;
  • 최은숙 (동명정보대학교 정보통신공학과) ;
  • 손영선 (동명정보대학교 정보통신공학과)
  • Published : 2004.04.01

Abstract

In this paper, we realized a system that receives the dynamic images of finger languages, which is the method of intention transmission of the hearing disabled person, using the white and black CCD camera, and that recognizes the images and converts them to the editable text document. We use the afterimage to draw a sharp line between indistinct images and clear images from a series of inputted images, and get the character alphabet from the away of continuous images and output the accomplished character to the word editor by applying the automata theory. After the system removes the varied wrist part from the data of clean image, it gets the controid point of hand by the maximum circular movement method and recognizes the hand that is necessary to analyze the finger languages by applying the circular pattern vector algorithm. The system abstracts the characteristic vectors of the hand using the distance spectrum from the center of the hand and it compares the characteristic vector of inputted pattern from the standard pattern by applying the fuzzy inference and recognizes the movement of finger languages.

본 논문에서는 흑백 CCD 카메라를 이용하여 청각 장애인의 의사전달 수단인 지화 동작을 동영상으로 입력받아 인식하여, 편집 가능한 텍스트 문서로 변환하는 시스템을 구현하였다. 일련의 입력 영상들 중에서 흐린 영상과 선명한 영상의 구분은 영상의 잔상을 이용하였고, 촬영된 연속 영상들의 배열로부터 문자 자소를 구하고, 오토마타를 적용하여 완성된 문자를 문서 편집기에 출력시켰다. 획득된 선명한 영상 데이터 중 변화가 심한 손목 부분을 제거한 후, 최대 원형 이동법을 이용하여 손의 무게 중심점을 구하고, 원형 패턴 벡터 알고리즘을 적용하여 지화 해석에 필요한 손을 인식하였다. 손 중심으로부터 거리 스펙트럼을 이용하여 지화 인식에 사용되는 손 모양의 특징 벡터를 추출하고, 퍼지 추론을 적용하여 표준 패턴과 입력 패턴의 특징벡터를 비교, 지화 동작을 인식하였다.

Keywords

References

  1. 김정배 "칼라 손 추적기를 이용한 실시간 한글 수화 인식 시스템의 확장",한국과학기술원 전기 및 전자공학과 석사학위논문, 1998.
  2. 권경혁, 우요섭, 민홍기 "한국어 수화 번역 시스템 설계" 한국정보처리학회 논문지 Vol. 7, No. 3, pp.756-765, 2000.
  3. 오영준, 장훈 "수화통역시스템 설계 및 구현" 한국정보과학회 논문지 Vol. 29, No. 2, pp.691-693, 2002.
  4. 김태수,전중창,최경애 "Motion-Primitive에 의한 한국 수화 생성시스템의 개발" 멀티미디어학회 논문지 Vol. 4, No. 3, pp.238-245, 2001.
  5. 한종호 "수화교육시스템을 위한 동영상 처리에 관한 연구"한국외국어대학교 대학원 전자계산학과 석사학위논문, 1996.
  6. 조재현 "수화 인식을 위한 다중 마커 추적 기법에 관한 연구",서울여자대학교 대학원 전산과학과 석사학위논문, 1999.
  7. 이찬수, 김종성, 박규태, 장원, 변증남 "지문자를 포함한 연속된 한글 수화의 실시간 인식 시스템의 구현" 대한 전자공학회 논문지 Vol. 35, C편, No. 6, pp.76-87, 1998.
  8. 김종성, 이찬수, 장원, 변증남 " 한글 수화용 동적 손 제스처의 실시간 인식 시스템의 구현에 관한 연구"대한 전자공학회 논문지 Vol. 34, C편, No. 2, pp. 61-70, 1997.
  9. 장동혁 "Visual C++을 이용한 디지털 영상처리의 구현", 정보게이트, 2001.
  10. 정향영, 신일식, 손영선, "원형 패턴 벡터 알고리즘을 이용한 손가락 이동에 의한 커서제어", 한국 퍼지 및 지능 시스템 학회 논문지 Vol. 11, No. 6, pp.487-490, 2001.
  11. 本多中二, 大理有生, "퍼지 공학 입문", 웅보출판사, 2000.

Cited by

  1. Hierarchical Hidden Markov Model for Finger Language Recognition vol.52, pp.9, 2015, https://doi.org/10.5573/ieie.2015.52.9.077