• 한국정보통신학회:학술대회논문집
• /
• 한국해양정보통신학회 2011년도 추계학술대회
• /
• pp.199-200
• /
• 2011

키넥트(Kinect) 센서를 이용한 연구가 활발하게 이루어지고 있다. 특히, 키넥트 센서는 2차원 칼라 영상 뿐만 아니라 2차원의 깊이(depth) 정보를 제공하므로 그 활용가치가 높다고 볼 수 있다. 현재 주목받고 있는 분야는 제어시스템 분야를 들 수 있으며, 인체 모션을 이용하여 특정 명령을 수행하거나 기계의 움직임을 제어할 수 있도록 하는 연구가 활발하게 진행되고 있다. 본 논문에서는 키넥트 센서를 이용하여 윈도우즈 운영체제의 키보드와 마우스를 하나로 통합하고 Window7 기반의 응용프로그램을 제어할 수 프로그램을 설계하여 다양한 입력 모션에 대한 패턴인식을 통하여 3차원 입력장치의 구현을 키넥트 기반으로 실현 가능한 것을 제시하고자 한다.

• 한국정보통신학회논문지
• /
• 제18권8호
• /
• pp.1931-1940
• /
• 2014

x본 논문에서는 키넥트(Kinect) 시스템에서 획득한 깊이 영상으로부터 convex-hull을 이용한 기하학적 특징 기반의 손 모양 인식 기법을 제안한다. 키넥트 시스템은 깊이 영상과 사용자의 골격 정보를 제공하는 카메라로 손 영역 검출에 유용하게 활용할 수 있다. 제안하는 기법에서는 키넥트로 획득한 깊이 영상에서 손 영역을 검출하고, 이 손 영역의 convex-hull을 구한다. 손 모양에 따라서 변하는 convex-hull에서 잡음으로 생긴 경계점 및 인식에 불필요한 경계점을 일련의 기법을 통해 제거한다. 추려진 경계점을 통해 재구성된 convex-hull을 특정 다각형으로 판단하고, 이 다각형의 내각의 합을 이용하여 손 모양을 인식하게 된다. 실험을 통해 제안하는 기법이 인식하고자 하는 모델에 대하여 높은 인식률을 보여준다는 것을 확인하였고, 단순히 특정 방향으로 고정된 손 모양뿐만 아니라 같은 모양이나 방향이 틀어진 손 모양에 대해서도 우수한 인식 성능을 확인하였다.

• 디지털콘텐츠학회 논문지
• /
• 제15권4호
• /
• pp.473-480
• /
• 2014

오늘날 컴퓨터의 사용이 대중화 되면서 키보드나 마우스와 같은 기존의 사용자 인터페이스에 비해 보다 편리하고 자연스러운 인터페이스에 대한 연구가 활발히 진행되면서, 최근 마이크로소프트의 동작 인식 모듈인 키넥트에 대한 관심이 높아지고 있다. 키넥트는 내장된 센서를 통해 신체의 주요 관절의 움직임 및 깊이 정보를 인식할 수 있으며 내장 마이크를 통해 간단한 음성인식도 가능하다. 본 논문에서는 OpenCV 라이브러리를 키넥트에 접목하여, 키넥트의 깊이 데이터, skeleton tracking, labeling 알고리즘으로 손 영역 추출 및 움직임의 정보를 인식하여 가상 마우스와 가상 키보드를 구현하고, 음성인식을 통해 기존 입력 장치의 기능을 구현하는 것을 목표로 한다.

• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2012년도 춘계학술대회
• /
• pp.182-184
• /
• 2012

마이크로소프트에서 개발한 키넥트(kinect)는 엑스박스(XBox) 게임 컨트롤러로 사용하는 장비이며 이 센서를 이용하여 사용자의 인체 행동을 인식하여 게임을 진행할 수 있는 센서 시스템이다. 또한 윈도우 환경에서 키넥트를 활용하여 다양한 응용 프로그램 개발을 할 수 있도록 SDK를 제공하고 있다. 현대사회에서 각종 범죄가 늘어남에 따라서 CCTV의 운용이 늘어나고 있으며 지정된 구역을 감시하는데 다양한 영상 장비들과 프로그램이 운용하고 있다. 시장에 판매되고 있는 CCTV 장비들 중에서 사람 추적기능을 가능 제품은 가격이 대부분 고가이다. 또한 야간에서는 사람의 감지가 힘들다. 본 연구에서는 키넥트의 골격 추적기능과 음성인식 기능을 활용하여 실시간 영상 녹화 프로그램을 개발하고자 하며, 개발된 프로그램은 키넥트 센서로 영상을 실시간 녹화하고 침입자에 대한 움직임을 자동 추적하여 녹화하는 DVR 시스템을 제안하고자 한다. 또한 야간에서는 깊이(Depth) 영상을 이용하여 인물을 인식과 추적을 한다. 궁극적으로 키넥트 센서(Kinect Sensor)의 CCTV기능에 대한 활용성을 연구하는데 목적을 가진다.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제9권7호
• /
• pp.2585-2598
• /
• 2015

Hand posture recognition has played a very important role in Human Computer Interaction (HCI) and Computer Vision (CV) for many years. The challenge arises mainly due to self-occlusions caused by the limited view of the camera. In this paper, a robust hand posture recognition approach based on 3D point cloud from two RGB-D sensors (Kinect) is proposed to make maximum use of 3D information from depth map. Through noise reduction and registering two point sets obtained satisfactory from two views as we designed, a multi-viewed hand posture point cloud with most 3D information can be acquired. Moreover, we utilize the accurate reconstruction and classify each point cloud by directly matching the normalized point set with the templates of different classes from dataset, which can reduce the training time and calculation. Experimental results based on posture dataset captured by Kinect sensors (from digit 1 to 10) demonstrate the effectiveness of the proposed method.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제9권8호
• /
• pp.3136-3150
• /
• 2015

A vision-based 3D tracking of articulated human hand is one of the major issues in the applications of human computer interactions and understanding the control of robot hand. This paper presents an improved approach for tracking and recovering the 3D position and orientation of a human hand using the Kinect sensor. The basic idea of the proposed method is to solve an optimization problem that minimizes the discrepancy in 3D shape between an actual hand observed by Kinect and a hypothesized 3D hand model. Since each of the 3D hand pose has 23 degrees of freedom, the hand articulation tracking needs computational excessive burden in minimizing the 3D shape discrepancy between an observed hand and a 3D hand model. For this, we first created a 3D hand model which represents the hand with 17 different parts. Secondly, Random Forest classifier was trained on the synthetic depth images generated by animating the developed 3D hand model, which was then used for Haar-like feature-based classification rather than performing per-pixel classification. Classification results were used for estimating the joint positions for the hand skeleton. Through the experiment, we were able to prove that the proposed method showed improvement rates in hand part recognition and a performance of 20-30 fps. The results confirmed its practical use in classifying hand area and successfully tracked and recovered the 3D hand pose in a real time fashion.

• 한국통신학회논문지
• /
• 제38C권5호
• /
• pp.409-419
• /
• 2013

키넥트 카메라는 마이크로소프트사에서 2010년 11월에 출시한 xbox360의 움직임 감지 카메라로 깊이 영상과 색상 영상을 획득할 수 있다. 하지만 적외선 패턴을 이용한 깊이 영상의 획득 방법의 한계로 인해 객체의 경계 주변으로 홀(hole) 및 잡음이 생기고 영상으로 재생 시 경계 주변에서 흔들림(flickering) 현상이 발생한다. 본 논문에서는 이러한 흔들림 현상을 보정하여 화질이 좋은 가상 시점 영상을 실시간으로 생성하는 기법을 제안한다. 제안하는 기법에서는 먼저 결합형 양방향 필터를 이용하여 경계 주변의 홀을 채운다. 경계 주변의 흔들림 현상은 화소를 탐색하여 처리하는 기법을 적용하여 보정한다. 향상된 깊이 영상과 색상 영상에 3D 워핑(3D warping) 기법을 적용하여 가상 시점 영상을 획득한다. 획득된 영상에서 가려짐 영역(occlusion region)으로 인하여 생기는 홀은 블록기반의 기울기 탐색 기법과 블록의 신뢰도를 이용하여 채우게 된다. 실험을 통해 제안하는 시스템이 가상 시점 영상을 실시간으로 합성하는 것을 확인하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2018년도 춘계학술발표대회
• /
• pp.529-531
• /
• 2018

본 논문은 끊이질 않는 졸음운전 사고를 방지하기 위한 연구 내용이다. Kinect 의 움직임 감지 기반 센서를 활용하여 센서를 통하여 얻은 수치를 코드화 하여 프로그램을 구현한다. 졸음운전이라는 안전사고는 사전에 방지가 가능한 안전사고로서 운전자들이 졸음에 빠졌을 때 이를 스스로 인지하여 운전자에게 청각적 신호를 주어 운전자의 졸음운전을 방지하여 안전운전을 지향한다. 이는 졸음운전이 잦은 장거리 운전자나 화물트럭 기사들, 습관적으로 졸음운전을 하는 운전자들에게 효과적인 시스템이다.

• 한국컴퓨터정보학회논문지
• /
• 제22권9호
• /
• pp.73-80
• /
• 2017

In this paper, we design and implement a mobile game based on Kinect sensor. This game is a motion recognition maze game based on Kinect sensor using XNA Game Studio. The game consists of three stages. Each maze has different size and clear time limit. A player can move to the next stage only if the player finds the exit within a limited time. However, if the exit is not found within the time limit, the game ends. In addition, two kinds of mini games are included in the game. The first game is a fruit catch game using motion recognition tracking of the Kinect sensor, and player have to pick up a certain number of randomly falling fruits. If a player acquire a certain number of fruits at this time, the movement speed of the player is increased. However, if a player takes a skeleton that appears randomly, the movement speed will decrease. The second game is a Quiz game using the speech recognition function of the Kinect sensor, and a question from random genres of common sense, nonsense, ancient creature, capital, constellation, etc. are issued. If a player correctly answers more than 7 of 10 questions, the player gets useful items to use in finding the maze. This item is a navigator fairy that helps the player to escape the forest.

• Journal of Computational Design and Engineering
• /
• 제2권2호
• /
• pp.73-78
• /
• 2015

In this paper, we propose a new approach to providing interactive and collaborative lens among multi-users for supporting level-of-detailed views using smartphones in a public display. In order to provide smartphone-based lens capability, the locations of smartphones are effectively detected and tracked using Kinect, which provides RGB data and depth data (RGB-D). In particular, human skeleton information is extracted from the Kinect 3D depth data to calculate the smartphone location more efficiently and correctly with respect to the public display and to support head tracking for easy target selection and adaptive view generation. The suggested interactive and collaborative lens using smartphones not only can explore local spaces of the shared display but also can provide various kinds of activities such as LOD viewing and collaborative interaction. Implementation results are given to show the advantage and effectiveness of the proposed approach.