DOI QR코드

DOI QR Code

Implementation of Multi-device Remote Control System using Gaze Estimation Algorithm

시선 방향 추정 알고리즘을 이용한 다중 사물 제어 시스템의 구현

  • Yu, Hyemi (Dept. of Human Environment and Design, Yonsei University) ;
  • Lee, Jooyoung (Dept. of Music, Yonsei University) ;
  • Jeon, Surim (Dept. of Economics, Yonsei University) ;
  • Nah, JeongEun (University College, Yonsei University)
  • 유혜미 (연세대학교 생활과학대학 생활디자인학과) ;
  • 이주영 (연세대학교 음악대학 관현악과) ;
  • 전수림 (연세대학교 상경대학 경제학부) ;
  • 나정은 (연세대학교 학부대학)
  • Published : 2022.11.21

Abstract

제어할 사물을 선택하기 위해 여러 단계를 거쳐야 하는 기존 '스마트 홈'의 단점을 보완하고자 본 논문에서는 사용자의 시선 방향을 추정하여 사용자가 바라보는 방향에 있는 사물을 제어할 수 있는 시스템을 제안한다. 일반 RGB 카메라를 통해 Pose Estimation으로 추출한 Landmark들의 좌표 값을 이용하여 시선 방향을 추정하는 알고리즘을 구현하였으며, 이는 근적외선 카메라와 Gaze Tracking 모델링을 통해 이루어지던 기존의 시선 추적 기술에 비해 가벼운 데이터를 산출하고 사용자와 센서간의 위치 제약이 적으며 별도의 장비를 필요로 하지 않는다. 해당 알고리즘으로 산출한 시선 추적의 정확도가 실제 주거환경에서 사용하기에 실효성이 있음을 실험을 통해 입증하였으며, 최종적으로 이 알고리즘을 적용하여 적외선 기기와 Google Home 제품에 사용할 수 있는 시선 방향 사물 제어 시스템을 구현하였다.

Keywords

Acknowledgement

본 논문은 과학기술정보통신부 정보통신창의인재양성사업의 지원을 통해 수행한 ICT 멘토링 프로젝트 결과물입니다