• 제목/요약/키워드: Language as Sign

검색결과 144건 처리시간 0.026초

수화 패턴 인식을 위한 2단계 신경망 모델 (Two-Stage Neural Networks for Sign Language Pattern Recognition)

  • 김호준
    • 한국지능시스템학회논문지
    • /
    • 제22권3호
    • /
    • pp.319-327
    • /
    • 2012
  • 본 논문에서는 착용식 추적장치나 표식 등의 보조 도구를 사용하지 않는 환경의 동영상 데이터로부터 수화 패턴을 인식하는 방법론에 관하여 고찰한다. 시스템 설계 및 구현에 관한 주제로서 특징점의 추출기법, 특징데이터의 표현기법 및 패턴 분류기법에 관한 방법론을 제시하고 그 유용성을 고찰한다. 일련의 동영상으로 표현되는 수화패턴에 대하여 특징점의 공간적 위치에 대한 변이 뿐만 아니라 시간차원의 변화를 고려한 특징데이터의 표현방법을 제시하며, 방대한 데이터에 의한 분류기의 크기 문제와 계산량의 문제를 개선하기 위하여 효과적으로 특징수를 줄일 수 있는 특징추출 방법을 소개한다. 패턴 분류과정에서 점진적 학습(incremental learning)이 가능한 신경망 모델을 제시하고 그 동작특성 및 학습효과를 분석한다. 또한 학습된 분류모델로부터 특징과 패턴 클래스 간의 상대적 연관성 척도를 정의하고, 이로부터 효과적인 특징을 선별하여 성능저하 없이 분류기의 규모를 최적화 할 수 있음을 보인다. 제안된 내용에 대하여 여섯 가지 수화패턴을 대상으로 적용한 실험을 통하여 유용성을 평가한다.

한글 수화용 동적 손 제스처의 실시간 인식 시스템의 구현에 관한 연구 (On-line dynamic hand gesture recognition system for the korean sign language (KSL))

  • 김종성;이찬수;장원;변증남
    • 전자공학회논문지C
    • /
    • 제34C권2호
    • /
    • pp.61-70
    • /
    • 1997
  • Human-hand gestures have been used a means of communication among people for a long time, being interpreted as streams of tokens for a language. The signed language is a method of communication for hearing impaired person. Articulated gestures and postures of hands and fingers are commonly used for the signed language. This paper presents a system which recognizes the korean sign language (KSL) and translates the recognition results into a normal korean text and sound. A pair of data-gloves are used a sthe sensing device for detecting motions of hands and fingers. In this paper, we propose a dynamic gesture recognition mehtod by employing a fuzzy feature analysis method for efficient classification of hand motions, and applying a fuzzy min-max neural network to on-line pattern recognition.

  • PDF

수화통역사를 위한 강의실 및 강당에서의 정보지원 시스템에 관한 연구 (The Research of Information Support System in the Classrooms and Auditoriums for the Sign Language Interpreters)

  • 유현배
    • 디지털콘텐츠학회 논문지
    • /
    • 제11권4호
    • /
    • pp.513-518
    • /
    • 2010
  • 청각장애인의 사회진출의 증가로 대부분의 강연회에서 청각장애인을 고려한 수화통역사의 배치와 통역내용의 명확성이 매우 중요하게 인식되고 있다. 특히 통역내용의 명확성을 높이기 위해서 수화통역사는 강연자의 모습과 강의내용을 명확하게 파악하고 반드시 청중을 바라보면서 통역을 해야만 한다. 본 연구에서는 이러한 문제를 해결하기 위해서 소규모의 강연회를 고려한 강의실과 강당에서 수화통역사에게 강연자의 모습과 강연 내용 등의 정보를 최대한 제공할 수 있는 시스템을 제안하였다. 또한 본 연구에서 제시한 시스템의 유효성을 검증하기 위해서 관련 시스템, 실험 방법 등에 관해 서술을 하였다. 본 연구결과 수화통역사에게 제안한 시스템을 통한 강연 내용과 강연자의 모습에 대한 영상을 제시하는 것이 매우 효과적임을 알 수 있었다.

실내환경의 Sign System에 의한 인지적 접근성 변화에 관한 연구 (A Study on the Transformation of the Cognitive Approachability by Sign System of Interior Environment)

  • 오인욱;이창윤
    • 한국실내디자인학회논문집
    • /
    • 제28호
    • /
    • pp.133-139
    • /
    • 2001
  • There are many types of linguistical system generally being used in modern society and it is essential to understand the primary components comprising the linguistical system when communication by the language system. In the linguistics point of view, the sign system has been developed from the simple linguistic symbols used by our ancestors in the ancient period, those visual linguistic sign can be so symbolize and express simply the significant meaning of it that people can understand and communicate with it so fast and easily. Therefore, the purpose of this report is how the sign system can be convenient, handy, safe, comfortable, and confusion-proof to the occupants as the public media; easily understandable to the individual by the development and constitution of effectual signage system concerning guidance, direction and safeguards in thee visual linguistics point of view. Consequently, the sign system have been studied based upon the theory of visual perception considering the cognitive and sociopsychological affects of user.

  • PDF

라즈베리 파이와 립 모션을 이용한 지화 번역 시스템 설계 및 구현 (Design and Implementation of Finger Language Translation System using Raspberry Pi and Leap Motion)

  • 정필성;조양현
    • 한국정보통신학회논문지
    • /
    • 제19권9호
    • /
    • pp.2006-2013
    • /
    • 2015
  • 청각 장애인은 소리를 듣고 음성으로 표현하는 의사소통에 어려움이 있기 때문에 주로, 구화, 수화, 필담 등을 이용하여 의사소통을 진행한다. 청각 장애인과 건청인과의 의사소통을 위해서는 수화가 가장 좋은 방법이지만 수화 사용방법을 이해해야만 하는 어려움이 따른다. 본 논문은 청각 장애인과 건청인간의 의사소통을 위한 수단으로 지화 번역 시스템을 설계 및 구현하였다. 지화 입력 수단으로 손가락 모양과 손동작을 추적할 수 있는 립 모션을 사용하였다. 입력된 정보를 처리하고 번역하기 위해서 저전력 싱글 보드 컴퓨터인 라즈베리 파이를 활용하였다. 시스템 개발을 위하여 Node.js와 MongoDB를 활용하여 플랫폼에 구애받지 않고 다양한 환경에서 사용할 수 있도록 구현하였다. 클라이언트용 애플리케이션은 HTML5를 기반으로 구현하여 웹 브라우징이 가능한 스마트 디바이스를 지원한다.

Hand Language Translation Using Kinect

  • Pyo, Junghwan;Kang, Namhyuk;Bang, Jiwon;Jeong, Yongjin
    • 전기전자학회논문지
    • /
    • 제18권2호
    • /
    • pp.291-297
    • /
    • 2014
  • Since hand gesture recognition was realized thanks to improved image processing algorithms, sign language translation has been a critical issue for the hearing-impaired. In this paper, we extract human hand figures from a real time image stream and detect gestures in order to figure out which kind of hand language it means. We used depth-color calibrated image from the Kinect to extract human hands and made a decision tree in order to recognize the hand gesture. The decision tree contains information such as number of fingers, contours, and the hand's position inside a uniform sized image. We succeeded in recognizing 'Hangul', the Korean alphabet, with a recognizing rate of 98.16%. The average execution time per letter of the system was about 76.5msec, a reasonable speed considering hand language translation is based on almost still images. We expect that this research will help communication between the hearing-impaired and other people who don't know hand language.

Artificial Neural Network for Quantitative Posture Classification in Thai Sign Language Translation System

  • Wasanapongpan, Kumphol;Chotikakamthorn, Nopporn
    • 제어로봇시스템학회:학술대회논문집
    • /
    • 제어로봇시스템학회 2004년도 ICCAS
    • /
    • pp.1319-1323
    • /
    • 2004
  • In this paper, a problem of Thai sign language recognition using a neural network is considered. The paper addresses the problem in classifying certain signs conveying quantitative meaning, e.g., large or small. By treating those signs corresponding to different quantities as derived from different classes, the recognition error rate of the standard multi-layer Perceptron increases if the precision in recognizing different quantities is increased. This is due the fact that, to increase the quantitative recognition precision of those signs, the number of (increasingly similar) classes must also be increased. This leads to an increase in false classification. The problem is due to misinterpreting the amount of quantity the quantitative signs convey. In this paper, instead of treating those signs conveying quantitative attribute of the same quantity type (such as 'size' or 'amount') as derived from different classes, here they are considered instances of the same class. Those signs of the same quantity type are then further divided into different subclasses according to the level of quantity each sign is associated with. By using this two-level classification, false classification among main gesture classes is made independent to the level of precision needed in recognizing different quantitative levels. Moreover, precision of quantitative level classification can be made higher during the recognition phase, as compared to that used in the training phase. A standard multi-layer Perceptron with a back propagation learning algorithm was adapted in the study to implement this two-level classification of quantitative gesture signs. Experimental results obtained using an electronic glove measurement of hand postures are included.

  • PDF

연극 무대 공간 디자인의 수사학적 연구 - 세익스피어 작 "리어왕"의 무대 공간 디자인 사례분석을 중심으로 - (A Study on the Rhetorical Expression of Scene Design in Theatre - Focused on the Analysis of Scene Design of "King Lear" -)

  • 안주영
    • 한국실내디자인학회:학술대회논문집
    • /
    • 한국실내디자인학회 2007년도 춘계학술대회 논문집
    • /
    • pp.176-180
    • /
    • 2007
  • The stage space in theatre for the performance of a play requires two aspects of the physical space for a play and the image as the background or the theme of a play. This research focuses on the scene design that creates the background or the theme of a play and communicates it to the audience. The scene design is composed of various design elements of space and objects as the properties of a play. Design elements and the objects are the design languages in various form; plane, three-dimensional, multi-dimensional form. These design language have the significant meaning as a sign like human language. The scene design is completed with rhetorical expression for communication in theatre. This research defines the category of meaning that design elements of scene design can create and the rhetorical expression of the scene design language. King Lear directed by Robert G. Anderson was analyzed with the category of design elements as a sign and the pattern of the rhetorical expression. The scene design for a play is completed effectively by the rhetorical expression of design elements as the design language for communication with the audience in theatre.

  • PDF

도덕경(道德經)에 나타난 노자(老子)의 언어관 (Laotzu's View of Language: As Represented in Tao De Ching)

  • 이장송
    • 인문언어
    • /
    • 제8집
    • /
    • pp.11-38
    • /
    • 2006
  • Laotzu's view of language is well expressed at the beginning stanza of "道可道 非常道" of Tao De Ching, the interpretation of which is pivotal for the proper interpretation of the entire text. Two lines of interpretation of this stanza have been proposed; The first view regards the letter "道" in "非常道" as representing that which is signified by a sign. The other takes the posture that the letter "道" is itself the signifier of the sign. I argue in this article that the second posture should be taken to interpret Tao De Ching properly, contrary to the traditional interpretation of this stanza, by pointing out the verses which inevitably contradict each other when interpreted according to the first view. The second view leads to the conclusion that everyday language is not sufficient enough to describe the supernatural beings, including Tao, accurately, and seeks a way to augment ordinary language for appropriate description of such supernatural beings. The strategy Laotzu adopts in Tao De Ching is to expand the expressive power of ordinary language by extensive use of metaphors. This paper discerns 4 conceptual metaphors in the sense of Johnson and Lakoff(1980) which underlie the metaphors used in Tao De Ching: (1) Tao is Void; (2) Tao is Mother; (3) Tao is Valley; and (4) Tao is Untrimmed Log.

  • PDF

청각장애인을 위한 의사소통 시스템 디자인 연구 (A Study on the Communication System Design for Auditory Disabled)

  • 양승호;송지원
    • 한국HCI학회:학술대회논문집
    • /
    • 한국HCI학회 2009년도 학술대회
    • /
    • pp.1172-1175
    • /
    • 2009
  • 본 연구는 청각장애인들의 통신기기에 대한 요구를 발견하고 이를 제품 및 인터페이스 개발에 반영함으로써 청각장애인들의 의사소통에 대한 문제를 해결하고자 한 디자인 연구이다. 청각장애인들과 통역사들에 대한 3회의 FGI를 통하여 청각장애인들의 일상생활에서의 의사소통 방법, 의사소통을 위한 도구의 사용, 그리고 소통에 대한 요구 등을 이해하고, 이들의 효과적인 의사소통을 가능하게 하는 방법 및 체계를 제안하였다. 이를 바탕으로 의사소통 시스템을 제안하고, 원격 통역서비스 및 전화 중개통역 서비스를 포함한 청각장애인과 건청인간의 실시간 의사소통을 효과적으로 지원할 수 있는 의사소통 시스템의 기능적 측면, 수화영상통화와 디지털 필담 및 문자 메시지에서 청각장애인들의 의사소통의 특성을 반영하여 디자인된 인터페이스의 측면, 그리고 수화영상통화 및 청각장애인들의 일상생활에서 발생되는 문제점들을 해소하기 위한 도구의 하드웨어 디자인 측면에서 청각장애인들의 요구사항을 반영하기 위한 디자인 대안의 탐색이 이루어졌다. 제안된 디자인 안은 사용자 평가를 통하여 청각장애인들의 요구에 부합함을 검증하고 개발을 위한 디자인의 구체화 단계에 있다.

  • PDF