Computer Interface for the Disabled Using Gyro-sensors and Artificial Neural Network

자이로 센서와 인공신경망을 이용한 장애인용 컴퓨터

  • 안용식 (건국대학교 의과대학 의학공학부) ;
  • 엄광문 (건국대학교 의과대학 의학공학부) ;
  • 김철승 (건국대학교 의과대학 의학공학부) ;
  • 허지운 (건국대학교 의과대학 의학공학부) ;
  • 나유진 (모빌솔루션(주))
  • Published : 2003.10.01

Abstract

This paper aims at developing 'gyro-mouse' which provides decent and comfortable human-computer interface that supports the usage of such software as an internet-browser in PC for the people paralyzed in upper limbs. This interface operates on information collected from head movement to get the cursor control. The interface is composed of two modules. One is hardware module in which the head horizontal and vertical angular velocities are detected and transmitted into PC. The other is a PC software that translates the received data into movement and click signals of the mouse. The ANN (artificial neural network) learns the quick nodding pattern of each user as click input so that it can provide user-friendly interface. The performance of the system was evaluated by three indices that are click recognition rate. error in cursor position control. and click rate of the moving target box. The performance result of the gyro-mouse was compared with that of the optical-mouse to assess the efficiency of the gyro-mouse. The average click recognition rate was 93%, average error in cursor position control was 1.4∼5 times of optical mouse. and the click rate with 50 pixels target box was 40%(30 clicks/min) to that of optical mouse. The click rate increased monotonously with the number of trial from 35% to 44%. The suggested system is expected to provide a new possibility to communicate with the society.

본 연구에서는 교통사고나 뇌졸중 등에 의해 상지의 장애를 가지는 장애인을 대상으로 하여, 인터넷의 브라우저와 같은 소프트웨어를 사용 할 수 있도록 하는 컴퓨터 인터페이스를 구현하는 것을 목적으로 한다. 이 인터페이스는 커서를 제어하기 위해 머리 움직임의 정보를 이용한다. 실제 시스템은 머리의 수평, 수직 각속도를 검출하여 컴퓨터로 전송하는 하드웨어부분과, 전송 받은 신호를 처리하여 마우스의 움직임과 클릭신호로 변환하는 소프트웨어 부분으로 구성하였다. 클릭신호는 순간적인 끄덕임으로 정의하였으며 특히, 인공신경망이 각 사용자별 클릭 패턴을 학습하여 사용자 친화적인 인터페이스를 제공하도록 하였다. 구현된 시스템의 성능을 클릭의 인식률, 커서의 이동제어오차, 이동출현하는 목표박스의 단위시간당 클릭율의 세가지 항목으로 평가하였다. 또한. 일반적으로 사용되는 광마우스와 본 연구에서 개발한 자이로마우스를 각각 이 실험에 사용하여, 양자간의 차이를 비교하였다. 개발된 자이로마우스에서 클릭의 인식률은 평균 93%였고, 커서의 수평수직 이동 제어오차는 광마우스의 1.4∼1.5배였다. 랜덤위치에 출현하는 50픽셀의 목표박스의 클릭률은 광마우스의 40% (30 클릭/분)의 성능을 보였으며, 시행횟수에 따라 증가하여 l회차의 35%에서 3회차에는 44%로 단조증가하는 경향을 보였다. 제안된 시스템은, 장애인에게 사회와 의사소통 할 수 있는 새로운 가능성을 제시할 것이 기대된다.

Keywords

References

  1. http://www.bio-bot.com/privateweb/datasheets/sensors/rnotion/tokingyro.pdf
  2. N. Furuse, T. Watanabe, R. Futami, N. Hoshimiya and Y. Handa., 'Control command input system using residual motor function for motor disabled patients', Japanese Journal of Medical Electronics and Biological Engineering, Vol. 37, No.2, pp. 30-38, 1999
  3. Yu-Luen Chen, 'Application of Tilt Sensors in Human-Computer Mouse Interface for People With Disabilities', IEEE Transactions on Neural Systems and Rehabilitation Engineering, Vol. 9, No.3, pp. 289-294, 2001 https://doi.org/10.1109/7333.948457
  4. K. Doi, H. Higa, I. Nakamura, N. Hoshimiya and Y. Handa., 'A study on method of control commands for functional electrical stimulation system using head movement', Technical Report of IEICE, Vol. 6, pp. 43-48, 1999
  5. Young-Wook Kim, 'Development of headset-type computer mouse using gyro sensors for the handicapped', Electronics Letters, vol. 38, No. 22, pp. 1313-1314, 2002
  6. Young-Wook Kim and Iung-Hyun Cho, 'A Novel Development of headset-type computer mouse using gyro sensors for the handicapped', Annual International IEEE-EMBS Special Topic Conference on Microtechnologies in Medicine and Biology, pp. 356-359, 2002
  7. C. Guger, A. Schlogl, D. Walterspacher and G. Pfurtscheller, 'Design of an EEG-based brain-computer interface (BCI) from standard components running in real-time under windows', Biomedizinische Technik, Vol. 44, pp. 12-16, 1999
  8. S. H. Kwon and H. C. Kim, 'Development of EOGbased glasses-shape wireless mouse for computer interface for the disabled', Proceedings of the 4th APCMBE, p.205, 1999
  9. http://bme.snu.ac.kr/party/posterpic/p6.jpg
  10. 日本 厚生省 社會援護局 更正課, Tokyo, 第一法規出版株式會社, 日本の身體障碍者p.28, 1994
  11. J.-S. R. Iang and E. Mizutani, NJ, Prentice Hall, 'Supervised learning neural networks' in NeuroFuzzy and Soft Computing, pp. 226-257, 1997