• Proceedings of the Korea Information Processing Society Conference
• /
• 2018.10a
• /
• pp.889-891
• /
• 2018

가상현실 (Virtual Reality, VR) 컨텐츠가 다양해지면서 사용자들의 관심도 높아지고 있다. 초기 VR 컨텐츠는 헤드 마운티드 디스플레이 (Head Mounted Display, HMD)와 컨트롤러만 사용한다. 사용자의 요구가 높아지면서 현실적인 컨텐츠 구현을 위해서 사용자의 신체 움직임으로 제어하는 풀 바디 트래킹(Full Body Tracking) 기술이 도입되고 있다. 머리에 착용하는 HMD와 양손으로 제어하는 두 개의 컨트롤러 뿐만 아니라 모션캡쳐장비, 트래커 장비를 사용자의 다양한 위치에 착용시켜, 세밀한 움직임 트래킹이 가능해졌다. 본 연구에서 서브 모션 기반의 움직임 추적 방법과 이를 기반한 서브모션 시스템을 제안한다. 서브모션 시스템은 VR 컨텐츠에 사용되는 사용하는 센서 위치를 VR캐릭터의 대응되는 위치에 출력하는 방식이 아닌, 사용자의 움직임에 따라 다양한 센서 위치 변화를 인식하고, 이를 기반으로 VR에서 사전에 지정된 모션을 인식 및 출력한다. 사용자의 움직임을 세분화하여 각각의 연속된 서브모션들로 인식하고, 각각의 서브 모션에서 연속적으로 인식 가능한 서브 모션을 분기를 통해 정의하고 인식함으로써 다양하고 자유도 높은 모션 처리가 가능하다. 선행 기술들의 문제점인 고정된 데미지 방식 및 부자연스러운 모션을 해결하고 사용자에게 실제와 같은 동작을 취하도록 유도하여 몰입감등을 부여할 수 있다. 서브 모션들을 자동적으로 생성하는 시스템을 통해 풀 바디 트래킹 VR 컨텐츠에 적용 가능한 엔진을 연구 및 개발하여 해당 산업의 발전에 이바지하고자 한다.

• The Journal of the Korea Contents Association
• /
• v.19 no.11
• /
• pp.270-277
• /
• 2019

These days, with the advent of digital broadcasting, media environment offers users an opportunity to enjoy differentiated contents in a more aggressive fashion through user-media interactions based on computer technology. In fact, the development of contents which can induce spontaneous acts from users such as outdoor ads which use certain sensors and devices and exhibition halls has been active. With the development of low-price motion recognition devices, people have been able to enjoy diverse interaction-applied media by recognizing users' motion data without body contact. In this paper, we developed an interactive media player that can recognize the user's motion and control the video in the web service environment without installing a specific program. In addition, we set user motion recognition range and developed a user motion recognition algorithm suitable for the Leap Motion equipment installed in the kiosk. The results of this study can be experienced by various interactive media such as interactive tourism, education, and movie contents in kiosks that can be installed in public places.

• Journal of Korea Game Society
• /
• v.13 no.2
• /
• pp.29-38
• /
• 2013

Recently there has been an increasing interest on tangible games in which human motions are recognized rather than the handling of keyboards and mouses. Such games require a motion controller for recognizing the motions of users. In this paper, we analyze the characteristics of values of accelerator sensors which are generated by a user who perform a tennis swing while holding a smartphone with his/her hand, and propose a method for motion recognition based on DWT(Discrete Wavelet Transform). The proposed method enables a smartphone to serve as a motion controller, so that a user can enjoy a tangible tennis game without eliminates a need for buying the device. We developed a tennis game prototype using the proposed method. To our experiment, our method showed a high recognition rate and the usefulness in the game.

• Proceedings of the Korean Information Science Society Conference
• /
• 2012.06c
• /
• pp.456-458
• /
• 2012

운전 중 휴대전화의 사용은 교통사고 유발의 주요한 원인이며 운전자들은 운전 중 안전한 휴대전화 이용을 위해 핸즈프리, 블루투스 등의 다양한 방법을 이용해왔다. 하지만 이 방법들은 직접적인 접촉을 한번 이상 요구하기 때문에 이 과정에서 운전자의 주의 집중이 흐트러질 소지가 있다. 본 연구에서는 운전 중 안전한 스마트폰 사용을 위하여 전자기기에서 광범위하게 적용이 증가하고 있는 모션인식에 기반한 모션 디자인을 제안한다. 먼저 대상 모션을 선정하기 위하여 운전 중 발생할 가능성이 많은 모션을 정의하여 설문 조사를 시행하고, 설문 결과를 바탕으로 5 가지의 모션을 선정하였다. 다음으로, 선정된 모션에 대하여 모션과 그 모션의 동작 수행이 연관성을 가지도록 디자인하고, 이를 위한 기술적 고려 사항을 제시하였으며, 마지막으로 이들 모션에 대하여 사용자의 편의성과 기억의 용이성을 실험적으로 검증하였다. 실험 결과, 제시한 모션 디자인은 기억의 용이성 부분에서 적절한 결과를 보였으며 모션과 행위의 연계성과 편의성에 대하여도 긍정적인 평가를 이끌어냈다. 이러한 결과는 향후 구현되는 모션 디자인의 방향을 제시할 수 있으리라 기대된다.

• The Journal of the Korea institute of electronic communication sciences
• /
• v.19 no.2
• /
• pp.397-402
• /
• 2024

Speech recognition and motion recognition technologies are applied and used in various smart devices, but they are composed of simple command recognition forms and are used as simple functions. Apart from simple functions for recognition data, professional command execution capabilities are required based on data learned in various fields. Research is being conducted on a system platform that provides optimal data to users using Generative AI, which is currently competing around the world, and can interact through voice recognition and motion recognition. The main technical processes designed for this study were designed using technologies such as voice and motion recognition functions, application of AI technology, and two-way communication. In this paper, two-way communication between a device and a user can be achieved by various input methods through voice recognition and motion recognition technology applied with AI technology.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2017.11a
• /
• pp.1028-1030
• /
• 2017

최근 스마트 기기에 대한 관심이 지속적으로 증가함에 따라 다양한 스마트 기기가 출시되고 그에 대한 연구가 활발히 진행되고 있다. 기존 스마트 기기에 탑재된 모션 센서에 관한 연구 대부분은 사용자의 움직임을 이용한 게임 연구에 치우쳐 있다. 본 논문은 사용자 모션의 시각화라는 접근을 통해 사용자의 모션을 직관적으로 볼 수 있도록 하였다. 안드로이드 기반 모바일 기기에 탑재되어 있는 모션 센서 중 방향 센서를 이용하여 사용자 모션에 대한 데이터를 수집하고 이를 시각화 알고리즘을 통해 시각화 한다. 시각화한 결과를 손 글씨 숫자 이미지의 대형 데이터베이스 기반 머신러닝을 활용하여 분석하고 사용자의 모션을 인식할 수 있다는 결과를 확인했다.

• Journal of Korea Society of Industrial Information Systems
• /
• v.19 no.5
• /
• pp.9-14
• /
• 2014

Recently, various contents using human motion are developed in computer vision and game industries. If we try to apply human motion to application programs and contents, users can experience a sense of immersion getting into it so that the users feel a high level of satisfaction from the contents. In this research, we analyze human head motion using images captured from an webcam and then we apply the result of motion recognition to a game without special devices as an interface. The proposed method, first, segments human head region using an image composed of MHI(Motion History Image) and the result of skin color detection, and then we calculate the direction and distance by the MHI sequence. In experiments, the proposed method for human head motion recognition was tested for controlling a game player. From the experimental results we proved that the proposed method can make a gammer feel more immersed into the game. Furthermore, we expect the proposed method can be an interface of a serious game for medical or rehabilitation purposes.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2012.01a
• /
• pp.177-178
• /
• 2012

최근의 게임 시장에서 체감형 게임은 홈 엔터테인먼트의 중심이 되어가고 있으며 그만큼 큰 인기를 끌며 발전하고 있다. 본 논문에서는 스마트폰 모션 센서를 실제 게임에 적용하기 위한 동작 인식 방법과 적용방법을 제안한다. 본 논문에서는 모션 센서를 이용하여 테니스 게임에 사용되는 모션들을 인식하고 적용시킨다. 실험의 결과 스마트폰 모션 센서를 적용시켜 게임에 이용하는 데에 사용자가 충분한 만족도를 보였다.

• Journal of Korea Game Society
• /
• v.14 no.2
• /
• pp.67-76
• /
• 2014

Recently there have been many interests on tangible sport games that can recognize the motions of players. In this paper, we propose essential technologies required for tangible games, which are methods for swing motion recognition and the calculation of shuttle cock's trajectory. When a user carries out a badminton swing while holding a smartphone with his hand, the motion signal generated by smartphone-embedded acceleration sensors is transformed into a feature vector through a Daubechies filter, and then its swing type is recognized using a k-NN based method. The method for swing motion presented herein provides an advantage in a way that a player can enjoy tangible games without purchasing a commercial motion controller. Since a badminton shuttle cock has a particular flight trajectory due to the nature of its shape, it is not easy to calculate the trajectory of the shuttle cock using simple physics rules about force and velocity. In this paper, we propose a method for calculating the flight trajectory of a badminton shuttle cock in which the wind effect is considered.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.148-153
• /
• 2006

인간-컴퓨터 상호작용(HCI) 기술은 과거 컴퓨터란 어렵고 소수의 숙련자만이 다루는 것이라는 인식을 바꾸어 놓았다. HCI 는 컴퓨터 사용자인 인간에게 거부감 없이 수용되기 위해 인간과 컴퓨터가 조화를 이루는데 많은 성과를 거두어왔다. 컴퓨터 비전에 기반을 두고 인간과 컴퓨터의 상호작용을 위하여 사용자 의도 및 행위 인식 연구들이 많이 행해져 왔다. 특히 손을 이용한 제스처는 인간과 인간, 인간과 컴퓨터 그리고 최근에 각광받고 있는 인간과 로봇의 상호작용에 중요한 역할을 해오고 있다. 본 논문에서 제안하는 손 추출 및 추적 알고리즘은 비전에 기반한 호출자 인식과 손 추적 알고리즘을 병행한 자연스러운 손 추출 및 추적 알고리즘이다. 인간과 인간 사이의 상호간의 주의집중 방식인 호출 제스처를 인식하여 기반하여 사용자가 인간과 의사소통 하는 것과 마찬가지로 컴퓨터/로봇의 주의집중을 끌도록 하였다. 또한 호출 제스처에 의해서 추출된 손동작을 추적하는 알고리즘을 개발하였다. 호출 제스처는 카메라 앞에 존재할 때 컴퓨터/로봇의 사용자가 자신에게 주의를 끌 수 있는 자연스러운 행동이다. 호출 제스처 인식을 통해 복수의 사람이 존재하는 상황 하에서 또한 원거리에서도 사용자는 자신의 의사를 전달하고자 함을 컴퓨터/로봇에게 알릴 수 있다. 호출 제스처를 이용한 손 추출 방식은 자연스러운 손 추출을 할 수 있도록 한다. 현재까지 알려진 손 추출 방식은 피부색을 이용하고 일정 범위 안에 손이 존재한다는 가정하에 이루어져왔다. 이는 사용자가 제스처를 하기 위해서는 특정 자세로 고정되어 있어야 함을 의미한다. 그러나 호출 제스처를 통해 손을 추출하게 될 경우 서거나 앉거나 심지어 누워있는 상태 등 자연스러운 자세에서 손을 추출할 수 있게 되어 사용자의 불편함을 해소 할 수 있다. 손 추적 알고리즘은 자연스러운 상황에서 획득된 손의 위치 정보를 추적하도록 고안되었다. 제안한 알고리즘은 색깔정보와 모션 정보를 융합하여 손의 위치를 검출한다. 손의 피부색 정보는 신경망으로 다양한 피부색 그룹과 피부색이 아닌 그룹을 학습시켜 얻었다. 손의 모션 정보는 연속 영상에서 프레임간에 일정 수준 이상의 차이를 보이는 영역을 추출하였다. 피부색정보와 모션정보로 융합된 영상에서 블랍 분석을 하고 이를 민쉬프트로 추적하여 손을 추적하였다. 제안된 손 추출 및 추적 방법은 컴퓨터/로봇의 사용자가 인간과 마주하듯 컴퓨터/로봇의 서비스를 받을 수 있도록 하는데 주목적을 두고 있다.