• 제목/요약/키워드: hand signal recognition

검색결과 55건 처리시간 0.039초

의수 제어용 동작 인식을 위한 웨어러블 밴드 센서 (Wearable Band Sensor for Posture Recognition towards Prosthetic Control)

  • 이슬아;최영진
    • 로봇학회논문지
    • /
    • 제13권4호
    • /
    • pp.265-271
    • /
    • 2018
  • The recent prosthetic technologies pursue to control multi-DOFs (degrees-of-freedom) hand and wrist. However, challenges such as high cost, wear-ability, and motion intent recognition for feedback control still remain for the use in daily living activities. The paper proposes a multi-channel knit band sensor to worn easily for surface EMG-based prosthetic control. The knitted electrodes were fabricated with conductive yarn, and the band except the electrodes are knitted using non-conductive yarn which has moisture wicking property. Two types of the knit bands are fabricated such as sixteen-electrodes for eight-channels and thirty-two electrodes for sixteen-channels. In order to substantiate the performance of the biopotential signal acquisition, several experiments are conducted. Signal to noise ratio (SNR) value of the knit band sensor was 18.48 dB. According to various forearm motions including hand and wrist, sixteen-channels EMG signals could be clearly distinguishable. In addition, the pattern recognition performance to control myoelectric prosthesis was verified in that overall classification accuracy of the RMS (root mean squares) filtered EMG signals (97.84%) was higher than that of the raw EMG signals (87.06%).

가속도계를 이용한 전동의수의 손목관절 시스템 해석 (Wrist joint analysis of Myoelectronic Hand using Accelerometer)

  • 장대진;김명회;양현석
    • 한국소음진동공학회:학술대회논문집
    • /
    • 한국소음진동공학회 2003년도 춘계학술대회논문집
    • /
    • pp.876-881
    • /
    • 2003
  • This study focused on to design and toanalysis of a myoelectronic hand. We considered a low frequency factor in human life and to quantify low frequency which a human body responded to using a 1-axis ant a 3-axis accelerometer. The dynamic myoelectronic hand are important for tasks such a continuous prosthetic control and a EMG signal recognition, which have not been successfully mastered by the most neural approached To control myoelectronic hand, classifying myoelectronic patterns are also important. Experimental results of FEM are 110㎫ on Thumb, 200㎫ on Index finger, 220㎫ on Middle finger 260㎫ on Ring finger and 270㎫ on Little finger. Experimental results of accelerometer are 1.4-0.4(m/s2) ,(5-20(〔Hz〕) in Feeding activity and 0.4-0(m/s2) (0-10〔Hz〕) in Lifting activity. Considering these facts, we suggest a new type myoelectronic hand.

  • PDF

Combining Dynamic Time Warping and Single Hidden Layer Feedforward Neural Networks for Temporal Sign Language Recognition

  • Thi, Ngoc Anh Nguyen;Yang, Hyung-Jeong;Kim, Sun-Hee;Kim, Soo-Hyung
    • International Journal of Contents
    • /
    • 제7권1호
    • /
    • pp.14-22
    • /
    • 2011
  • Temporal Sign Language Recognition (TSLR) from hand motion is an active area of gesture recognition research in facilitating efficient communication with deaf people. TSLR systems consist of two stages: a motion sensing step which extracts useful features from signers' motion and a classification process which classifies these features as a performed sign. This work focuses on two of the research problems, namely unknown time varying signal of sign languages in feature extraction stage and computing complexity and time consumption in classification stage due to a very large sign sequences database. In this paper, we propose a combination of Dynamic Time Warping (DTW) and application of the Single hidden Layer Feedforward Neural networks (SLFNs) trained by Extreme Learning Machine (ELM) to cope the limitations. DTW has several advantages over other approaches in that it can align the length of the time series data to a same prior size, while ELM is a useful technique for classifying these warped features. Our experiment demonstrates the efficiency of the proposed method with the recognition accuracy up to 98.67%. The proposed approach can be generalized to more detailed measurements so as to recognize hand gestures, body motion and facial expression.

몰입형 가상현실의 착용식 사용자 인터페이스를 위한 Mixture-of-Experts 기반 제스처 인식 (Gesture Recognition based on Mixture-of-Experts for Wearable User Interface of Immersive Virtual Reality)

  • 윤종원;민준기;조성배
    • 한국HCI학회논문지
    • /
    • 제6권1호
    • /
    • pp.1-8
    • /
    • 2011
  • 최근 가상현실에 대한 관심이 높아짐에 따라 다양한 서비스와 어플리케이션이 개발되고 있으며, 이와 더불어 몰입형 상호작용을 위한 제스처 기반 사용자 인터페이스가 활발히 연구되고 있다. 본 논문에서는 가상현실 환경 내 사용자 움직임을 효과적으로 반영하고 몰입감을 높이기 위해 제스처 인식 기반 착용식 사용자 인터페이스를 제안한다. 제안하는 인터페이스는 적외선 LED가 부착되어 있는 헬멧과 적외선 수신기를 이용하여 사용자의 머리 움직임을 인식하며, 양 손에 착용한 데이터 글로브로부터 사용자의 손 제스처를 인식한다. 또한, 헤드 마운트 디스플레이 장치(HMD)를 이용하여 직접 사용자의 시점 변화와 가상환경의 시점 변화를 일치시킨다. 손 제스처의 경우 다수의 관절로 이루어져 있는 손의 특성상 다양한 동작이 가능하며 손 크기나 손동작이 사람마다 모두 다르기 때문에 다양한 사용자들을 대상으로 할 때, 일반적인 모델로는 정확한 인식이 어렵다. 본 논문에서는 다양한 사용자를 대상으로 정확히 손 제스처를 인식하기 위해 Mixture-of-Experts 기반 인식 방법을 적용하였다. 제안하는 인터페이스의 유용성을 평가하기 위해 가상 오케스트라 지휘 환경을 구현하여 인터페이스의 동작 성능을 분석하고 사용성 평가를 수행하였다. 그 결과, 사용자들이 쉽고 직관적으로 사용할 수 있으며 흥미를 유발함을 확인하였다.

  • PDF

주변 전기장 측정센서를 이용한 손동작 신호 검출을 위한 신호처리시스템 연구 (Study on Signal Processing Method for Extracting Hand-Gesture Signals Using Sensors Measuring Surrounding Electric Field Disturbance)

  • 천우영;김영철
    • 스마트미디어저널
    • /
    • 제6권2호
    • /
    • pp.26-32
    • /
    • 2017
  • 본 논문에서는 지구전기장 왜란신호를 전위차로 변환하는 EPIC(Electric Potential Integrated Circuit) 센서를 이용한 NUI(Natural User Interface) 기술의 요소기술인 신호검출 전자회로를 기반으로 LED 조명을 제어하는 시스템을 구현하였다. 기존에는 CIB 개발 장비를 통해서만 제한적인 형태로 이용 가능했던 신호를 모든 EPIC 센서 각각의 신호를 추출할 수 있도록 개발된 신호검출 전자회로를 이용하였다. 이렇게 추출한 신호는 이후 손동작 인식프로세스에서 특징추출 등의 과정에서 더 많은 자유도와 성능개선 효과를 보여준다. 설계되어 제작된 회로의 실제 응용시스템으로서 적용성을 검증하기 위하여 4개의 손동작으로 LED 조명의 on/off 와 밝기를 조정할 수 있는 시스템을 설계하였다. 기존의 EPIC 센서를 이용하여 명령체계를 구축하고 인터페이스 제어신호를 이용하여 보다 빠른 패턴인식 처리 속도를 얻을 수 있었다.

자이로센서를 이용한 손 동작 인식형 보조 입력장치 구현 (Implementation of the Hand-motion Recognition based Auxiliary Input Device using Gyro Sensor)

  • 박기홍;이현직;김윤호
    • 한국항행학회논문지
    • /
    • 제13권4호
    • /
    • pp.503-508
    • /
    • 2009
  • 본 논문에서는 특정인(장애인, 재활치료자, 고령자 등)들이 수월하게 컴퓨터를 사용 할 수 있도록 하기 위한 손동작 인식형 보조 입력장치를 설계하였다. 입력장치는 3차원 공간에서 손 동작 인식을 위해 자이로 센서를 사용하였고, 통신 대역은 무선 RF 2.4GHz 대역에서 신호를 송 수신 하도록 하였다. 제작된 보드는 자이로 모듈, RF 통신 모듈, MCU, USB 단자 등으로 구성되었다. 동작인식 실험결과, 마우스 기반의 커서 이동 및 프로그램 제어 등이 설계 규격대로 수행됨을 확인 하였다.

  • PDF

밀리미터파의 손동작 인식 알고리즘에 관한 연구 (Study on Hand Gestures Recognition Algorithm of Millimeter Wave)

  • 남명우;홍순관
    • 한국산학기술학회논문지
    • /
    • 제21권7호
    • /
    • pp.685-691
    • /
    • 2020
  • 본 논문에서는 77GHz를 사용하는 밀리미터파 레이더 센서의 반향 신호를 이용하여 손동작의 움직임을 추적한 후 얻어진 데이터로 0부터 9까지의 숫자들을 인식하는 알고리즘을 개발하였다. 손동작을 감지하여 레이더 센서로부터 얻어진 반향 신호들은 산란 단면적의 차이 등에 의해 불규칙한 점들의 군집형태를 보인다. 이들로부터 유효한 중심점을 얻기 위해 3차원 좌푯값들을 이용해 K-Means 알고리즘을 적용하였다. 그리고 얻어진 중심점들을 연결하여 숫자 형태의 이미지를 생성하였다. 얻어진 이미지와 스무딩 기법을 적용해 사람의 손글씨 형태와 유사하게 만든 이미지를 MNIST(Modified National Institute of Standards and Technology database)로 훈련된 CNN(Convolutional Neural Network) 모델에 입력하여 인식률을 비교하였다. 실험은 두 가지 방법으로 진행되었다. 먼저 스무딩 기법을 적용한 이미지와 적용하지 않은 이미지를 사용한 인식 실험에서는 각각 평균 77.0%와 81.0%의 인식률을 얻었다. 그리고 학습데이터를 확장(augmentation)한 CNN 모델의 실험에서는 스무딩 기법을 적용한 이미지와 적용하지 않은 이미지를 사용한 인식 실험에서 각각 평균 97.5%와 평균 99.0%의 인식률을 얻었다. 본 연구는 레이더 센서를 이용한 다양한 비접촉 인식기술에 응용이 가능할 것으로 판단된다.

작업자의 안전과 작업 편리성 향상을 위한 영상처리 및 기계학습 기반 수신호 인식 협동로봇 제어 교육 매체 개발 (Development of Collaborative Robot Control Training Medium to Improve Worker Safety and Work Convenience Using Image Processing and Machine Learning-Based Hand Signal Recognition)

  • 정진혁;정훈;박경근;이기주;박희석;안채헌
    • 실천공학교육논문지
    • /
    • 제14권3호
    • /
    • pp.543-553
    • /
    • 2022
  • 협동로봇은 4차 산업혁명에서 제시하고 있는 생산시스템 중 하나로 작업자의 정교한 손기술과 로봇의 단순 반복작업 능력을 조합하여 효율성을 극대화할 수 있는 시스템이다. 또한, 작업자와 로봇 간의 작업공간 공유에서 발생하는 안전문제의 해결과 함께 효율적인 인터페이스 방법 개발에 대한 연구가 지속적으로 진행되고 있다. 본 연구에서는 이를 위하여 작업자의 편리성과 집중도를 강화하기 위해 작업자의 수신호를 인식하여 로봇을 제어하는 방법을 제시하였으며 안전공간의 개념을 도입하여 작업자의 안전을 확보하였다. 이를 구현하기 위하여 로봇제어, PLC, 영상처리, 기계학습, ROS 등 다양한 기술을 사용하였다. 또한 이를 교육매체로 활용하기 위하여 제시된 기술들의 역할과 인터페이스 방법을 정의하여 제시하였다. 학습자들은 소개된 여러 기술들을 연계하여 시스템을 구축하고 조정하는 일을 수행한다. 따라서 현장에서 필요한 기술의 필요성을 인식시키고 이에 대한 심화 학습을 유도할 수 있는 큰 장점이 있다. 또한 문제를 제시한 뒤 스스로 문제를 해결하는 방법을 모색하는 형태로 진행해 자기 주도적으로 학습할 수 있도록 유도할 수 있다. 이를 통해 4차 산업혁명의 주요 기술들을 학습하고 다양한 문제에 대한 해결 능력을 향상시킬 수 있다.

CCD카메라와 레이저 센서를 조합한 지능형 로봇 빈-피킹에 관한 연구 (A Study on Intelligent Robot Bin-Picking System with CCD Camera and Laser Sensor)

  • 김진대;이재원;신찬배
    • 한국정밀공학회지
    • /
    • 제23권11호
    • /
    • pp.58-67
    • /
    • 2006
  • Due to the variety of signal processing and complicated mathematical analysis, it is not easy to accomplish 3D bin-picking with non-contact sensor. To solve this difficulties the reliable signal processing algorithm and a good sensing device has been recommended. In this research, 3D laser scanner and CCD camera is applied as a sensing device respectively. With these sensor we develop a two-step bin-picking method and reliable algorithm for the recognition of 3D bin object. In the proposed bin-picking, the problem is reduced to 2D intial recognition with CCD camera at first, and then 3D pose detection with a laser scanner. To get a good movement in the robot base frame, the hand eye calibration between robot's end effector and sensing device should be also carried out. In this paper, we examine auto-calibration technique in the sensor calibration step. A new thinning algorithm and constrained hough transform is also studied for the robustness in the real environment usage. From the experimental results, we could see the robust bin-picking operation under the non-aligned 3D hole object.