Improvement of Smartphone Interface Using AR Marker

AR 마커를 이용한 스마트폰 인터페이스의 개선

  • 강윤아 (한국과학기술원 기계공학과) ;
  • 한순흥 (한국과학기술원 해양시스템공학과)
  • Received : 2011.03.10
  • Accepted : 2011.08.19
  • Published : 2011.10.01

Abstract

As smartphones came into wide use recently, it has become increasingly popular not only among young people, but middle-aged people as well. Most smartphones use capacitive full touch screen, so touch commands are made by fingers unlike the PDAs in the past that use touch pens. In this case, a significant portion of the smartphone's screen is blocked by the finger so it is impossible to see the screens around the finger touching the screen, and difficulty occurs in precise control used for small buttons such as qwerty keyboard. To solve this problem, this research proposes a method of using simple AR markers to improve the interface of smartphones. Sticker-form marker is attached to fingernails and placed in front of the smartphone camera Then, the camera image of the marker is analyzed to determine the orientation of the marker to perceive as onRelease() or onPress() of the mouse depending on the marker's angle of rotation, and use its position as the position of the mouse cursor. This method can enable click, double-click, drag-and-drop used in PCs as well as touch, slide, long-touch-input in smartphones. Through this research, smartphone inputs can be made more precise and simple, and show the possibility of the application of a new concept of smartphone interface.

Keywords

References

  1. http://ko.wikipedia.org/
  2. 허승주, 이성환, "연속적인 손 제스처의 실시간 인식을 위한 계층적 베이지안 네트워크," 정보과학회논문지 : 소프트웨어 및 응용, 제36권, 제12호, 2009. 12.
  3. Starner, T. and Pentland, A., "Real-time American Sign Language Recognition from Video using Hidden Markov Models," MIT Media Lab., MIT, Cambridge, MA, Tech. Rep. TR-375, 1995. pp. 1195-1207, 1995.
  4. 오승택, 전병환, "얼굴의 포즈 상태와 오토마타 기 법을 이용한 헤드 제스처 인식," 정보과학회논문지 : 소프트웨어 및 응용, 제28권, 제12호, 2001. 12.
  5. De Silva, L. C., Aizawa, K. and Hatori, M., "Detection and Tracking of Facial Feature by Using Edge Pixel Counting and Deformable Circular Template Matching," Trans. on IEICE Information and System, Vol. E78-D, No. 9,
  6. Michael Rohs and Philipp Zweifel, "A Conceptual Framework for Camera Phone-Based Interaction Techniques," Pervasive Computing, 2005.
  7. 빅토리아 본다르축, 정일룡, 김창수, 고성제, "카메라 영상정보를 이용한 모바일 유저 인터페이스 제어기법," 대한전자공학회 2009년 하계종합학술대회논문집, 2009.
  8. 이찬수 등 3인, "모바일 카메라 기기를 이용한 손제스처 인터페이스," 정보과학회논문지, 2010.
  9. Thomas Riisgaard Hansen 등 2인, "Mixed Interaction Space - Designing for Camera Based Interaction with Mobile Devices," CHI 2005, April 2-7, 2005, Portland, Oregon, USA.
  10. Martin Hachet 등 2인, "A Camera-Based Interface for Interaction with Mobile Handheld Computers," I3D '05 Proceedings of the 2005 Symposium on Interactive 3D Graphics and Games.
  11. 박형준, 문희철, "손가락 고정구를 이용한 휴대용 전자제품의 증강현실기반 감각형 상호작용," 한국CAD/CAM학회 논문집, 제16권, 제1호, pp. 1-10, 2011. 2.
  12. 변재형, 김명석, "체감형 인터랙션 : 모바일 기기의 새로운 인터페이스 방법으로서의 활용," 한국디자인학회, 디자인학연구, 통권 제57호, pp. 441-448, 2004. 8.
  13. 이종환, 한순흥, "생산 시뮬레이션에서 안전 표지판의 인식을 통한 혼합현실의 적용," 2007 한국 CAD/CAM 학회 학술발표회 논문집.
  14. 이종환 등 2명, "공장 배치 계획에서 혼합현실의 적용을 위한 안전표지판 인식," 한국 CAD/CAM 학회 논문집, 제14권, 제1호, pp. 42-49, 2009. 2.