• 제목/요약/키워드: Hand and finger recognition

검색결과 80건 처리시간 0.024초

실시간 손 제스처 인식을 위하여 손목 피부 표면의 높낮이 변화를 고려한 스마트 손목 밴드 (Smart Wrist Band Considering Wrist Skin Curvature Variation for Real-Time Hand Gesture Recognition)

  • 강윤;정주노
    • 로봇학회논문지
    • /
    • 제18권1호
    • /
    • pp.18-28
    • /
    • 2023
  • This study introduces a smart wrist band system with pressure measurements using wrist skin curvature variation due to finger motion. It is easy to wear and take off without pre-adaptation or surgery to use. By analyzing the depth variation of wrist skin curvature during each finger motion, we elaborated the most suitable location of each Force Sensitive Resistor (FSR) to be attached in the wristband with anatomical consideration. A 3D depth camera was used to investigate distinctive wrist locations, responsible for the anatomically de-coupled thumb, index, and middle finger, where the variations of wrist skin curvature appear independently. Then sensors within the wristband were attached correspondingly to measure the pressure change of those points and eventually the finger motion. The smart wrist band was validated for its practicality through two demonstrative applications, i.e., one for a real-time control of prosthetic robot hands and the other for natural human-computer interfacing. And hopefully other futuristic human-related applications would be benefited from the proposed smart wrist band system.

제스처 인식을 위한 손가락 개수 인식 방법 (A Finger Counting Method for Gesture Recognition)

  • 이도엽;신동규;신동일
    • 인터넷정보학회논문지
    • /
    • 제17권2호
    • /
    • pp.29-37
    • /
    • 2016
  • 인간은 의사소통을 통해서 상호관계를 유지시키고 발전시켜나간다. 의사소통은 크게 언어적 의사소통과 비언어적 의사소통으로 나뉜다. 언어적 의사소통은 말 또는 글을 사용하는 것이고 비언어적 의사소통은 몸동작으로 의사를 전달하는 것이다. 우리는 일상생활에서 대화를 할 때 말과 더불어 제스처를 함께 사용한다. 제스처는 비언어적 의사소통에 속하며, 다양한 형태와 움직임으로 의사를 전달할 수 있다. 이러한 이유로 제스처는 HCI 분야와 HRI 분야에서 NUI/NUX를 구현하기 위한 수단으로 각광받고 있다. 본 논문에서는 키넥트와 손의 기하학적인 특징을 사용하여 손 영역 검출과 손가락 개수를 인식하는 방법을 제안한다. 키넥트가 제공하는 깊이 영상을 이용하여 영상에서 손 영역을 검출하고 손의 윤곽선과 중점의 거리를 비교하여 손가락 개수를 파악한다. 본 논문에서 제안한 방법에 따른 손가락 개수 인식률은 평균 98.5%이고 수행시간은 0.065ms이다. 이 방법은 기존의 연구와 비교 했을 때, 인식 속도가 빠르며, 복잡도가 O(n),으로써 성능 또한 우수하다. 향후 이를 통해 제스처의 인식 가능한 범위를 증가시켜 보다 컴퓨터와 인간의 상호작용이 수월해지는데 도움이 될 것이다.

인간의 행동 인식을 위한 얼굴 방향과 손 동작 해석 (Analysis of Face Direction and Hand Gestures for Recognition of Human Motion)

  • 김성은;조강현;전희성;최원호;박경섭
    • 제어로봇시스템학회논문지
    • /
    • 제7권4호
    • /
    • pp.309-318
    • /
    • 2001
  • In this paper, we describe methods that analyze a human gesture. A human interface(HI) system for analyzing gesture extracts the head and hand regions after taking image sequence of and operators continuous behavior using CCD cameras. As gestures are accomplished with operators head and hands motion, we extract the head and hand regions to analyze gestures and calculate geometrical information of extracted skin regions. The analysis of head motion is possible by obtaining the face direction. We assume that head is ellipsoid with 3D coordinates to locate the face features likes eyes, nose and mouth on its surface. If was know the center of feature points, the angle of the center in the ellipsoid is the direction of the face. The hand region obtained from preprocessing is able to include hands as well as arms. For extracting only the hand region from preprocessing, we should find the wrist line to divide the hand and arm regions. After distinguishing the hand region by the wrist line, we model the hand region as an ellipse for the analysis of hand data. Also, the finger part is represented as a long and narrow shape. We extract hand information such as size, position, and shape.

  • PDF

다양한 환경에 강인한 컬러기반 실시간 손 영역 검출 (Color-Based Real-Time Hand Region Detection with Robust Performance in Various Environments)

  • 홍동균;이동화
    • 대한임베디드공학회논문지
    • /
    • 제14권6호
    • /
    • pp.295-311
    • /
    • 2019
  • The smart product market is growing year by year and is being used in many areas. There are various ways of interacting with smart products and users by inputting voice recognition, touch and finger movements. It is most important to detect an accurate hand region as a whole step to recognize hand movement. In this paper, we propose a method to detect accurate hand region in real time in various environments. A conventional method of detecting a hand region includes a method using depth information of a multi-sensor camera, a method of detecting a hand through machine learning, and a method of detecting a hand region using a color model. Among these methods, a method using a multi-sensor camera or a method using a machine learning requires a large amount of calculation and a high-performance PC is essential. Many computations are not suitable for embedded systems, and high-end PCs increase or decrease the price of smart products. The algorithm proposed in this paper detects the hand region using the color model, corrects the problems of the existing hand detection algorithm, and detects the accurate hand region based on various experimental environments.

HAND GESTURE INTERFACE FOR WEARABLE PC

  • Nishihara, Isao;Nakano, Shizuo
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 2009년도 IWAIT
    • /
    • pp.664-667
    • /
    • 2009
  • There is strong demand to create wearable PC systems that can support the user outdoors. When we are outdoors, our movement makes it impossible to use traditional input devices such as keyboards and mice. We propose a hand gesture interface based on image processing to operate wearable PCs. The semi-transparent PC screen is displayed on the head mount display (HMD), and the user makes hand gestures to select icons on the screen. The user's hand is extracted from the images captured by a color camera mounted above the HMD. Since skin color can vary widely due to outdoor lighting effects, a key problem is accurately discrimination the hand from the background. The proposed method does not assume any fixed skin color space. First, the image is divided into blocks and blocks with similar average color are linked. Contiguous regions are then subjected to hand recognition. Blocks on the edges of the hand region are subdivided for more accurate finger discrimination. A change in hand shape is recognized as hand movement. Our current input interface associates a hand grasp with a mouse click. Tests on a prototype system confirm that the proposed method recognizes hand gestures accurately at high speed. We intend to develop a wider range of recognizable gestures.

  • PDF

사과 수확 로봇의 핸드 개발(I) - 사과 수확용 로봇의 핸드 개발 - (Development of Apple Harvesting Robot(I) - Development of Robot Hand for Apple Harvesting -)

  • 장익주;김태한;권기영
    • Journal of Biosystems Engineering
    • /
    • 제22권4호
    • /
    • pp.411-420
    • /
    • 1997
  • The mechanization efficiency using high ability machines such as tractors or combines in a paddy field rice farm is high. Mechanization in harvesting fruits and vegetables is difficult, because they are easy to be damaged. Therefore, Advanced techniques for careful handling fruits and vegetables are necessary in automation and robotization. An apple harvesting robot must have a recognition device to detect the positioning of fruit, manipulators which function like human arms, and hand to take off the fruit. This study is related to the development of a rotatic hand as the first stage in developing the apple harvesting robot. The results are summarized as follows. 1. It was found that a hand that was eccentric in rotatory motion, was better than a hand of semicircular up-and-down motion in harvesting efficiency. 2. The hand was developed to control changes in grasp forces by using tape-type switch sensor which was attatched to fingers' inside. 3. Initial finger positioning was set up to control accurate harvesting by using a tow step fingering position. 4. This study showed the possibility of apple harvesting using the developed robot hand.

  • PDF

CamShift 알고리즘의 Hand Tracking 기법을 응용한 Hand Motion 입력 장치 시스템 (The input device system with hand motion using hand tracking technique of CamShift algorithm)

  • 전유나;김수지;이창훈;김형률;이성구
    • 디지털콘텐츠학회 논문지
    • /
    • 제16권1호
    • /
    • pp.157-164
    • /
    • 2015
  • 기존의 대표적인 입력장치는 키보드, 마우스 등으로 한정적이었으나 최근 들어 사용자들의 다양한 요구에 따라 새로운 형태의 입력장치들이 개발되는 추세이다. 이러한 추세에 맞춰 특수한 device 없이 영상의 hand motion을 분석해 명령을 부여하는 새로운 형태의 입력장치를 제안한다. Cam-Shift 기법으로 skin color 영역을 이진화 하여 tracking 한 후, labeling을 통해 분리한 손가락 영역과 손 중심점과의 각도를 동서남북으로 구분해 counting하여 손동작을 인식한다. 손동작에 대한 입력은 맨손에 배경처리를 하지 않은 경우 약 76.8%의 낮은 인식률을 보였으나, 붉은색 장갑을 착용하고 배경을 지정해 줄 경우 잡영 제거의 영향으로 인식률이 90.2%까지 향상된다.

건설 현장 특성을 고려한 출역관리시스템 선정 프레임워크 개발 (A Development of Framework for Selecting Labor Attendance Management System Considering Condition of Construction Site)

  • 김성아;진상윤;장문석;정충원;최철호
    • 한국건설관리학회논문집
    • /
    • 제16권4호
    • /
    • pp.60-69
    • /
    • 2015
  • 출역관리는 전통적으로 출역점검표 작성에 의해 수작업으로 진행되기 때문에 많은 노력과 시간을 요구했다. Bar Code, QR code, RFID와 같은 전자장치들이 발달하면서 자동화된 출역관리시스템이 출현하였고, 최근에는 지문, 정맥인식과 같은 생체인식과 융합된 다양한 유형의 출역관리시스템이 등장하고 있다. 출석체크를 위해 사용되는 다양한 인식 장비들의 출연에도 불구하고, 건설현장 마다 적합한 출역관리시스템을 선정하기 위한 체계적인 기준이 부족한 실정이다. 따라서 본 연구는 출역관리에 사용되는 다양한 인식 장비를 건설 현장에 적합한 시스템을 선정하기 위한 체계적인 의사결정 프레임워크를 제시하는 것이 목적이다. 본 연구는 건설현장에서의 사용성을 테스트하기 위해 인식장비 마다 특징들을 살펴보고, 기존 문헌 및 전문가 인터뷰를 수행하였다. 테스트 결과, 가장 빠른 시간 내에 많은 인원의 출석을 확인하는 것에는 RFID가 적합한 것으로 나타났다. 그리고 손혈관과 지문의 경우, 손가락 변형과 상관없이 페인트, 시멘트와 같은 오염물질이 많이 묻어있는 경우 인식이 되지 않는 것으로 나타났다. 이러한 테스트 결과를 반영하여 본 연구는 출역관리시스템 선정을 위한 모델을 제시하였으며, 보다 효율적인 출역관리시스템 구축에 기여할 것으로 기대한다.

인간에게 친밀한 한글 인식 및 편집 지원시스템 (Human Friendly Recognition and Editing Support System of Korean Language)

  • 손영선
    • 한국지능시스템학회논문지
    • /
    • 제17권4호
    • /
    • pp.494-499
    • /
    • 2007
  • 본 논문에서는 책 또는 논문을 읽을 때 중요한 부분 또는 정리해야 할 부분의 영역을 선택하면, 해당영역의 문자들을 문서편집기에 순차적으로 출력시킴으로써 수정 저장 가능하게 하여 공부한 부분을 정리하는 시스템을 구현하였다. 이 시스템은 사용자가 원하는 영역을 손가락으로 선택하면, 손 인식 알고리즘을 적용하여 손가락 움직임을 검출하여 선택된 영역을 인식한다. 선택된 영역의 가로, 세로 거리를 펄스 수로 변환한 후 모터를 제어하여 그 위치만큼 카메라를 이동시킨다. 문자인식이 가능하도록 줌을 확대/축소하고 조정된 줌에 맞는 초점으로 근접 제어한 후, 더욱 선명한 영상을 얻기 위해 명암차이를 이용하여 미세조정을 하였다. 획득된 영상에 문자인식 알고리즘을 적용하여 문서로 변환시켜서 중요 부분들을 정리케하는 한글 인식 및 편집지원 시스템을 구현하였다

휴대폰 상에서의 손동작 기반 증강현실 인터페이스 구현 (Implementation of Hand-Gesture-Based Augmented Reality Interface on Mobile Phone)

  • 최준영;박한훈;박정식;박종일
    • 방송공학회논문지
    • /
    • 제16권6호
    • /
    • pp.941-950
    • /
    • 2011
  • 최근 휴대폰의 발전과 더불어 휴대폰 환경에 적합한 인터페이스에 대한 연구가 많이 이루어지고 있다. 본 논문에서는 특히 사람에게 친숙한 손동작을 이용한 상호작용에 주목하여, 휴대폰 상에서 손동작을 이용한 비전 기반 인터페이스를 구현하였다. 사용자가 한손에 휴대폰을 들고 휴대폰의 카메라를 통해서 다른 손의 손바닥을 바라보면, 사용자의 손바닥 위에 가상 객체가 증강되고 사용자는 자신의 손과 손가락의 움직임을 통해서 가상 객체와 상호작용 할 수 있다. 구현된 인터페이스는 사람에게 친숙한 손동작을 기반으로 동작하기 때문에, 사용자는 별도의 훈련 과정 없이 친숙하게 사용가능하다. 또한, 추가적인 센서나 마커를 요구하지 않기 때문에, 사용자가 원하는 시간과 장소에서 자유롭게 가상 객체와 상호작용 할 수 있다. 일부 시간이 많이 걸리는 처리 과정을 휴대폰 환경에 적합하도록 최적화, 고속화함으로써, 구현된 인터페이스는 상용화된 휴대폰(Galaxy S2)에서 5 fps로 동작한다.