Android Platform based Gesture Recognition using Smart Phone Sensor Data

안드로이드 플랫폼기반 스마트폰 센서 정보를 활용한 모션 제스처 인식

The increase of the number of smartphone applications has enforced the importance of new user interface emergence and has raised the interest of research in the convergence of multiple sensors. In this paper, we propose a method for the convergence of acceleration, magnetic and gyro sensors to recognize the gesture from motion of user smartphone. The proposed method first obtain the 3D orientation of smartphone and recognize the gesture of hand motion by using HMM(Hidden Markov Model). The proposed method for the representation for 3D orientation of smartphone in spherical coordinate was used for quantization of smartphone orientation to be more sensitive in rotation axis. The experimental result shows that the success rate of our method is 93%.

스마트폰 어플리케이션 수의 증가는 새로운 유저인터페이스에 대한 중요성을 증대시켰으며, 다양한 센서를 융합한 유저인터페이스 개발 연구의 관심을 유도하고 있다. 본 논문에서는 스마트폰에 있는 가속도 센서, 자계 센서, 자이로 센서 정보를 융합하여 사용자 모션 제스처를 인식할 수 있는 새로운 유저인터페이스를 제안한다. 제안 방법은 유합 센서 정보로부터 스마트폰의 3차원 방위 정보를 구하고, HMM(Hidden Markov Model)을 이용하여 손동작 제스처를 인식한다. 특히 제안된 스마트폰의 3차원 방위 좌표계를 구면 좌표계로 변환하는 양자화 방법은 기본 축 회전에 더욱 민감한 인식이 이루어지도록 하였다. 실험을 통하여 제안한 방법이 93%로의 인식률을 보였다.