• 제목/요약/키워드: Gesture features

검색결과 92건 처리시간 0.028초

동적 베이스망 기반의 양손 제스처 인식 (Dynamic Bayesian Network based Two-Hand Gesture Recognition)

  • 석흥일;신봉기
    • 한국정보과학회논문지:소프트웨어및응용
    • /
    • 제35권4호
    • /
    • pp.265-279
    • /
    • 2008
  • 손 제스처를 이용한 사람과 컴퓨터간의 상호 작용은 오랜 기간 많은 사람들이 연구해 오고 있으며 커다란 발전을 보이고 있지만, 여전히 만족스러운 결과를 보이지는 못하고 있다. 본 논문에서는 동적 베이스망 프레임워크를 이용한 손 제스처 인식 방법을 제안한다. 유선 글러브를 이용하는 방법들과는 달리, 카메라 기반의 방법에서는 영상 처리와 특징 추출 단계의 결과들이 인식 성능에 큰 영향을 미친다. 제안하는 제스처 모델에서의 추론에 앞서 피부 색상 모델링 및 검출과 움직임 추적을 수행한다. 특징들간의 관계와 새로운 정보들을 쉽게 모델에 반영할 수 있는 동적 베이스망을 이용하여 두 손 제스처와 한 손 제스처 모두를 인식할 수 있는 새로운 모델을 제안한다. 10가지 독립 제스처에 대한 실험에서 최대 99.59%의 높은 인식 성능을 보였다. 제안하는 모델과 관련 방법들은 수화 인식과 같은 다른 문제들에도 적용 가능할 것으로 판단된다.

다양한 손 제스처 인식을 위한 곡률 분석 기반의 손 특징 추출 알고리즘 (Hand Feature Extraction Algorithm Using Curvature Analysis For Recognition of Various Hand Gestures)

  • 윤홍찬;조진수
    • 한국컴퓨터정보학회논문지
    • /
    • 제20권5호
    • /
    • pp.13-20
    • /
    • 2015
  • 본 논문에서는 손 제스처 인식에 필요한 특징 추출을 위하여 손가락의 개수뿐만 아니라 붙어있는 손가락 판별까지 인식할 수 있는 알고리즘을 제안한다. 제안하는 알고리즘은 컬러모델 기반의 피부색 범위 필터와 레이블링을 통하여 입력 영상에서 손 영역을 검출하고, 외곽선 및 특징점과 이들로부터 추출한 곡률 정보를 이용해 펴진 손가락의 개수 및 붙어있는 손가락 판별을 통한 특징을 추출하여 다양한 손 제스쳐를 인식한다. 실험결과 인식률과 처리 가능 프레임 레이트(frame rate)는 기존 알고리즘과 유사하였지만, 추출된 특징을 가지고 정의할 수 있는 제스처의 경우의 수는 기존 알고리즘보다 약 4배 정도 많아 훨씬 더 다양한 제스처를 인식할 수 있음을 알 수 있었다.

밀리미터파 레이더 기반 손동작 인식 시스템 및 알고리즘에 관한 연구 (Study on the Hand Gesture Recognition System and Algorithm based on Millimeter Wave Radar)

  • 이영석
    • 한국정보전자통신기술학회논문지
    • /
    • 제12권3호
    • /
    • pp.251-256
    • /
    • 2019
  • 본 연구에서는 손동작을 인식하기 위하여 밀리미터파 기반 레이더에서 얻어진 손동작의 주파수 반향 특성을 이용하는 알고리즘 및 시스템을 제안하였다. 제안된 시스템은 밀리미터파 아날로그 송수신부, ADC부 및 신호 처리부가 원칩으로 구현된 시스템을 이용하여 데이터를 수집하도록 구성하였고, 제안한 알고리즘은 반사된 주파수 영상의 제르니케모멘트로부터 얻어진 전역 및 지역 디스크립터로 구성된 BoF에서 K-means 클러스터링을 이용하여 코드 워드를 생성하고 SVM을 이용한 손동작 분류를 수행하였다. 수행 결과는 혼동행렬에서 얻어진 정밀도, 민감도 및 정확도를 이용하여 평가였다. 정확도 평가에서는 제안한 방법은 GZM방법 및 LZM방법과 비교하여 성능 평가를 위한 인덱스에서 제안한 방법이 95.6%의 성능을 보였고 비교한 나머지 두 방법은 88.4% 및 84%을 나타내어 제안한 방법이 기존의 두 방법에 비하여 7~8% 성능이 향상되었으며 정밀도 및 민감도에서도 나머지 두 방법에 대하여 향상된 성능을 나타내었다. 제안한 방법은 소형화된 밀리미터파 기반 레이더를 이용하여 동작 인식을 할 수 있는 임베디드 시스템의 응용가능성을 보여준다.

모바일 기기 환경의 인터렉티브 모션 기반 콘텐츠 개발 도구와 DEVS 모델링 (DEVS Modeling for Interactive Motion-based Mobile Contents Authoring Tool)

  • 주승환;최요한;임용수;서희석
    • 디지털산업정보학회논문지
    • /
    • 제11권2호
    • /
    • pp.121-129
    • /
    • 2015
  • Interactive media is a method of communication in which the output from the media comes from the input of the users. The interactive media lets the user go back with the media. Interactive media works with the user's participation. The media still has the same purpose but the user's input adds the interaction and brings interesting features to the system for a better enjoyment. We need a digital content using a dynamic motion and gesture of the mobile device. We made an authoring tool for content producers to easily create interactive content. We have tried to take advantage of the interaction by using a touch screen and a gravity sensor of the mobile device. This interaction may lead to allow the user to participate in the content, it can be used as a key device to assist in engagement. Furthermore, our authoring tool can be applied to various fields of publishing content.

Vision- Based Finger Spelling Recognition for Korean Sign Language

  • Park Jun;Lee Dae-hyun
    • 한국멀티미디어학회논문지
    • /
    • 제8권6호
    • /
    • pp.768-775
    • /
    • 2005
  • For sign languages are main communication means among hearing-impaired people, there are communication difficulties between speaking-oriented people and sign-language-oriented people. Automated sign-language recognition may resolve these communication problems. In sign languages, finger spelling is used to spell names and words that are not listed in the dictionary. There have been research activities for gesture and posture recognition using glove-based devices. However, these devices are often expensive, cumbersome, and inadequate for recognizing elaborate finger spelling. Use of colored patches or gloves also cause uneasiness. In this paper, a vision-based finger spelling recognition system is introduced. In our method, captured hand region images were separated from the background using a skin detection algorithm assuming that there are no skin-colored objects in the background. Then, hand postures were recognized using a two-dimensional grid analysis method. Our recognition system is not sensitive to the size or the rotation of the input posture images. By optimizing the weights of the posture features using a genetic algorithm, our system achieved high accuracy that matches other systems using devices or colored gloves. We applied our posture recognition system for detecting Korean Sign Language, achieving better than $93\%$ accuracy.

  • PDF

연속구어 내 발성 종결-개시의 음향학적 특징 - 말더듬 화자와 비말더듬 화자 비교 - (Acoustic Features of Phonatory Offset-Onset in the Connected Speech between a Female Stutterer and Non-Stutterers)

  • 한지연;이옥분
    • 음성과학
    • /
    • 제13권2호
    • /
    • pp.19-33
    • /
    • 2006
  • The purpose of this paper was to examine acoustical characteristics of phonatory offset-onset mechanism in the connected speech of female adults with stuttering and normal nonfluency. The phonatory offset-onset mechanism refers to the laryngeal articulatory gestures. Those gestures are required to mark word boundaries in phonetic contexts of the connected speech. This mechanism included 7 patterns based on the speech spectrogram. This study showed the acoustic features in the connected speech in the production of female adults with stuttering (n=1) and normal nonfluency (n=3). Speech tokens in V_V, V_H, and V_S contexts were selected for the analysis. Speech samples were recorded by Sound Forge, and the spectrographic analysis was conducted using Praat. Results revealed a stuttering (with a type of block) female exhibited more laryngealization gestures in the V_V context. Laryngealization gesture was more characterized by a complete glottal stop or glottal fry both in V_H and in V_S contexts. The results were discussed from theoretical and clinical perspectives.

  • PDF

Combining Dynamic Time Warping and Single Hidden Layer Feedforward Neural Networks for Temporal Sign Language Recognition

  • Thi, Ngoc Anh Nguyen;Yang, Hyung-Jeong;Kim, Sun-Hee;Kim, Soo-Hyung
    • International Journal of Contents
    • /
    • 제7권1호
    • /
    • pp.14-22
    • /
    • 2011
  • Temporal Sign Language Recognition (TSLR) from hand motion is an active area of gesture recognition research in facilitating efficient communication with deaf people. TSLR systems consist of two stages: a motion sensing step which extracts useful features from signers' motion and a classification process which classifies these features as a performed sign. This work focuses on two of the research problems, namely unknown time varying signal of sign languages in feature extraction stage and computing complexity and time consumption in classification stage due to a very large sign sequences database. In this paper, we propose a combination of Dynamic Time Warping (DTW) and application of the Single hidden Layer Feedforward Neural networks (SLFNs) trained by Extreme Learning Machine (ELM) to cope the limitations. DTW has several advantages over other approaches in that it can align the length of the time series data to a same prior size, while ELM is a useful technique for classifying these warped features. Our experiment demonstrates the efficiency of the proposed method with the recognition accuracy up to 98.67%. The proposed approach can be generalized to more detailed measurements so as to recognize hand gestures, body motion and facial expression.

미카엘 체홉 연기 테크닉에 대한 인지심리학적 고찰 (A cognitive psychological consideration of Michael Chehov's acting techniques)

  • 진현정;조준희
    • 공연문화연구
    • /
    • 제37호
    • /
    • pp.365-389
    • /
    • 2018
  • 본 연구의 목적은 그동안 이론적 또는 경험적으로만 연구되어왔던 미카엘 체홉(Michael Chekhov, 1891-1955)의 연기 테크닉을 과학적으로 탐구해 보는 데 있다. 특히 체홉 연기 테크닉의 바탕이자 핵심이라고 할 수 있는 '상상(imagination)'과 그의 독창적인 테크닉인 '심리적 제스처(Psychological Gesture)'에 대해 인지심리학의 관점에서 연구하고자 한다. 체홉이 모든 연기 작업의 기반으로 삼았던 '상상'은 현재 감각기관이 전달하지 않는 대상의 심적 표상을 의미하는 것으로 인지심리학에서는 이를 '심상(imagery)'이라고 일컫는다. 따라서 본 연구는 심상의 정의로부터 출발하여 심상의 특징과 종류를 간략하게 살펴보고, 체홉의 주장처럼 상상을 통해 연기 훈련을 하는 것이 가능한지를 과학적으로 입증해 보았다. 심상의 유효성을 입증하기 위해서 이론적 증거-기능 등가성 가설(functional equivalence hypothesis), 심리신경근 이론(psychoneuromuscular theory), 상징학습 이론(symbolic learning theory), 심리생리적 정보처리 이론(psychophygiological information processing)-와 실험적 증거-대뇌혈류(cerebral blood flow)나 사건 관련 전위(event-related potential)의 측정, fMRI(functional magnetic resonance imaging) 또는 PET(positron emission tomography)를 이용한 연구-를 모두 살펴보았다. 그 결과 심상은 지각과 기능적으로 동일하며, 심상을 이용해 인지 과제의 수행을 향상시키는 것이 가능함을 알 수 있었다. 또한 심상을 통해 신체적 변화가 심리적 변화(느낌)를 이끌어 낼 수 있다는 것을 입증하여 심리적 제스처 또한 과학적으로 유효함을 확인할 수 있었다. 이상의 연구로 미루어보아, 체홉은 그의 경험에 근거하여 연기 테크닉을 발전시켰지만, 과학적으로도 그의 테크닉은 유효성을 가진다고 판단할 수 있을 것이다. 비록 미흡하나마 본고에 의해 체홉의 연기 테크닉이 과학적으로 탐구되고 객관적 효용성이 입증되어 보다 많은 연기자 혹은 연기를 공부하는 학생들이 그의 테크닉을 '과학적으로' 이해하는 데 도움이 되길 기대해 본다.

인간의 비언어적 행동 특징을 이용한 다중 사용자의 상호작용 의도 분석 (Interaction Intent Analysis of Multiple Persons using Nonverbal Behavior Features)

  • 윤상석;김문상;최문택;송재복
    • 제어로봇시스템학회논문지
    • /
    • 제19권8호
    • /
    • pp.738-744
    • /
    • 2013
  • According to the cognitive science research, the interaction intent of humans can be estimated through an analysis of the representing behaviors. This paper proposes a novel methodology for reliable intention analysis of humans by applying this approach. To identify the intention, 8 behavioral features are extracted from the 4 characteristics in human-human interaction and we outline a set of core components for nonverbal behavior of humans. These nonverbal behaviors are associated with various recognition modules including multimodal sensors which have each modality with localizing sound source of the speaker in the audition part, recognizing frontal face and facial expression in the vision part, and estimating human trajectories, body pose and leaning, and hand gesture in the spatial part. As a post-processing step, temporal confidential reasoning is utilized to improve the recognition performance and integrated human model is utilized to quantitatively classify the intention from multi-dimensional cues by applying the weight factor. Thus, interactive robots can make informed engagement decision to effectively interact with multiple persons. Experimental results show that the proposed scheme works successfully between human users and a robot in human-robot interaction.

케네디의 "니그로의 요술집": 흑인여성 자아의 양상 (Kennedy's Funnyhouse of a Negro: The features of a black woman's self-identity)

  • 박진숙
    • 영어어문교육
    • /
    • 제12권1호
    • /
    • pp.205-220
    • /
    • 2006
  • This paper argues how Adrienne Kennedy embodies the features of a black woman's self-identity in Funnyhouse of a Negro. An educated young black woman, Sarah lives in a funnyhouse which is surrounded by mirrors. The reflections in the funnyhouse's mirrors are a metaphor of a black woman's life in America. Sarah's narrative is played out by four "selves," differing by sex and race. These selves imply her mixed cultural heritage. Two white women symbolize white European royalty, Jesus expresses christianity which is the basis of western culture and Lumumba represents Africa. Sarah's desire for whiteness is concentrated on skin color and hair. She longs for pallid skin and straight hair of the white race. Sarah wanted to be white, but her "tainted blood" by her black father made that impossible. Sarah is always obsessed by the fear of her father and the unhappy destiny of her mother. Ceaseless knocking, paralyzed images of lifelessness and surreal dreams effectively show her fear. Sarah's selves remain fragmented in the funnyhouse. Sarah exposures the black woman's anger and frustration through her death. Her death is a gesture of denial and refusal of the dominant society. At the same time, it was her last choice and struggle not to completely lose her own identity.

  • PDF