• Proceedings of the Korean Society of Computer Information Conference
• /
• 2023.07a
• /
• pp.275-276
• /
• 2023

본 논문은 Windows 플랫폼에서 마우스 움직임 데이터를 수집하고 이를 웹사이트와 통합하여 시각화하는 서비스의 개발을 제시한다. 이 서비스는 마우스 움직임 데이터의 수치화와 표현을 가능하게 하여 사용자 행동에 대한 유용한 통찰력을 제공한다. 윈도우를 기반으로 마우스 움직임 데이터를 수집하여 데이터베이스에 데이터를 저장한다. 데이터베이스에 저장된 데이터는 실시간으로 연동하여 시각화하여 웹사이트를 통하여 보여준다. 본 연구를 통해 무의미하게 여겨질 수 있는 데이터를 사용자에게 의미있게 전환하여 보여주기 위한 시도를 하였다.

• Journal of KIISE:Software and Applications
• /
• v.29 no.11
• /
• pp.851-859
• /
• 2002

This paper discusses the design of a working system that visually recognizes hand gestures for the control of a window based user interface. We present a method for tracking the fingertip of the index finger using a single camera. Our method is based on CAMSHIFT algorithm and performs better than the CAMSHIFT algorithm in that it tracks well particular hand poses used in the system in complex backgrounds. We describe how the location of the fingertip is mapped to a location on the monitor, and how it Is both necessary and possible to smooth the path of the fingertip location using a physical model of a mouse pointer. Our method is able to track in real time, yet not absorb a major share of computational resources. The performance of our system shows a great promise that we will be able to use this methodology to control computers in near future.

• The Journal of the Institute of Internet, Broadcasting and Communication
• /
• v.14 no.2
• /
• pp.135-140
• /
• 2014

In this paper, we describe the contents of noise characteristic enhancement using digital filtering to the motion vector in the pattern noise of optical mouse. The designed circuit is implemented to enhance the smoothing and trembling with filtering and averaging of x, y motion vector before PS2 or USB output. The function is verified by using FPGA and the performance is measured by the fabricated chip using $0.35{\mu}m$ standard CMOS process. The system clock is 6MHz and the motion vector has the range of +6 to -6 per 1/1700sec. It is tested using the Cartesian robot to measure the noise characteristic enhancement.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2011.01a
• /
• pp.173-174
• /
• 2011

본 논문에서는 마우스 제어를 위한 손 인식 시스템을 제안한다. 이를 위하여 배경영상과 입력영상의 차영상을 이용하여 움직임 영역을 구하고, RGB 컬러모델을 HSV 컬러모델로 변환하여 피부색상과 유사한 영역을 얻는다. 이 둘 사이의 교집합을 통하여 손 후보 영역을 추출하고 모폴로지 연산을 통해 잡음을 제거한 후 손 영상을 추출한다. 추출한 손 영상을 모폴로지 연산을 이용하여 손바닥 영역과 손가락 영역으로 분리한 다음 손바닥 영역의 위치정보를 마우스의 좌표로, 손가락의 개수를 마우스 이벤트로 정의하여 마우스를 제어한다. 실험 결과는 제안된 시스템이 마우스 제어에 효과적으로 사용될 수 있음을 보이고 있다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2009.11a
• /
• pp.129-132
• /
• 2009

컴퓨터의 소형화로 휴대성과 공간의 제약이 없는 컴퓨터 인터페이싱 방법의 필요성이 증가하고 있으며, 이와 관련하여 인간-컴퓨터 상호작용(HCI)을 위한 제스처 기반의 제어방식에 대한 연구가 활발하게 진행되고 있다. 기존의 손동작 인터페이스 구현들은 컴퓨터를 제어하기 위하여 사용방법에 대한 선행학습이 필요하였다. 이 논문은 사용자의 손 모양과 손끝 정보만을 가지고 선행학습이 요구되지 않는 간편한 인터페이스 구현방법을 제안하였다. 이를 위해 1대의 웹캠과 인텔의 오픈소스 영상처리 라이브러리 OpenCv를 사용하였다. 차영상과 화소값 기반의 영상처리과정을 통해 실시간으로 손 영역을 추적하고 이를 이진화 시켰다. 손가락의 움직임도 값이 변하지 않도록 중심모멘트를 설정하여 마우스 커서 움직임을 상대적으로 활용하였다. 상황에 따라 손 끝점을 절대적 좌표로 활용하여 손이 웹캠에서 벋어날 때 움직임을 자연스럽게 연결시켰다. 마지막으로 검지의 움직임 하나 만으로 마우스 클릭 이벤트를 수행함으로써 보다 사용자에게 친숙한 핸드마우스 인터페이스를 구현하였다.

• The Journal of the Korea Contents Association
• /
• v.13 no.2
• /
• pp.348-358
• /
• 2013

This study aimed to investigate the effect of a lap board that was developed to prevent musculoskeletal disorders caused by the use of a computer mouse. Study participants were 10 college students in their 20s who did not have any musculoskeletal symptoms. We analyzed the difference in upper limb movements, electromyographic activity, task performance, and subjective discomfort between 2 conditions: use of a mouse with the lap board and use of a mouse placed on a desk. Results of behavior analysis showed that there was a significant difference between the 2 conditions in terms of the average angle of shoulder flexion, shoulder internal rotation, and forearm pronation(p< 0.05). However, electromyographic activity, task performance, and subjective discomfort showed no significant differences between the 2 conditions. When subjects used the mouse with the lap board, their upper extremity was located much closer to the torso than when they used the mouse placed on the desk. Six of 10 participating students preferred the lap board. We expect that advanced research on prevention of musculoskeletal disorders due to the use of the computer mouse will be conducted in the near future.

• Proceedings of the Korean Information Science Society Conference
• /
• 2012.06a
• /
• pp.343-345
• /
• 2012

오늘날 우리는 생활속에서 여러 디지털기기들을 사용하고 있다. 새로운 종류의 여러 디지털기기들이 나타났지만 기존에 사용하던 입력장치의 틀에 얽매여 있다. 키보드, 마우스, 리모콘, 터치패널 등처럼 항상 별도의 컨트롤러를 지녀야 하는 불편함에서 벗어나지 못하고 있다. 이런 이유로 최근에 별도의 컨트롤러 없이 사용자의 움직임을 인식하여 다양한 기능을 수행할 수 있는 키넥트에 대한 관심이 높아지고 있다. 본 연구에서는 키넥트에서 인식하는 손의 움직임 정보를 인식하여 키보드와 마우스를 비롯한 기존 입력장치의 임무를 대신하는 것을 목표로 한다. 키보드 모드는 화면상에 가상의 버튼들을 배치한 후 손의 위치 정보가 버튼안에 있을 때 이벤트를 발생시키는 방법으로 구현한다. 마우스모드는 오른손으로 포인터를 이동하고, 왼손으로 보조 조작이 가능하도록 구현한다. 이 연구를 통해 손이 자유롭지 못하거나 정적이지 못한 상황에서 물리적인 도구가 필요 없는 간단한 조작이 가능하다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2006.06b
• /
• pp.274-276
• /
• 2006

본 논문은 얼굴 특징 추적을 이용한 새로운 인터페이스를 제안한다. 눈의 움직임만으로 구현된 기존의 시스템은 마우스 클릭 이벤트에 걸리는 waiting time으로 인해 속도 개선이 필요했다. 이를 위해서 본 논문에서는 눈의 움직임 뿐 아니라 입의 움직임도 인식하여 사용자의 요구를 처리할 수 있는 시스템을 개발한다. 제안된 시스템은 얼굴 검출 모듈, 눈 검출 모들, 입 검출 모듈, 얼굴 특징 추적 모듈, 마우스 제어모듈의 5 가지 모듈로 구성되어 있다. 먼저, 피부색 모델과 연결 성분 분석을 이용하여 얼굴을 검출하고 신경망 기반의 분류기와 에지 검출기를 이용하여 검출된 얼굴 영역에서 눈과 입을 찾는다. 이후 프레임에서는 mean-shift 알고리즘과 템플릿 매칭을 이용하여 눈과 입이 정확하게 추적되어 눈의 움직임으로 마우스의 포인트를 움직이고 입의 움직임으로 메뉴나 아이콘을 클릭하게 된다. 제안된 시스템의 효율성을 검증하기 위해서 웹 브라우저의 인터페이스로 활용하였다. 25명의 사용자에 대해 실험한 결과는 제안된 시스템이 보다 편리하고 친숙한 인터페이스로 활용될 수 있다는 것을 보여주었다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2009.11a
• /
• pp.371-374
• /
• 2009

가상 현실과 현실 세계가 공존하는 증강 현실은 현재 및 향후 실감미디어 콘텐츠에 중요한 역할을 할 것으로 기대된다. 증강 현실은 게임, 엔터테인먼트, 교육 분야 등에서 응용에 따라 다양한 기술들의 결합이 요구된다. 본 논문에서는 교육적 효과를 주는 버블 포핑 증강 현실 기법을 제안한다. 버블 포핑 시스템은 비디오 입력용 웹캠, 마커 패턴 영상, 그래픽 구 버블 객체, 그래픽 마우스 등으로 구성된다. 일반 마우스의 이동에 따라 그래픽 마우스가 3차원 공간상에서 이동하면서 버블과의 충돌이 발생하게 되면, 충돌시 발생하는 버블의 이벤트로 동적 움직임, 터짐 등의 버블 효과를 구현할 수 있는 방법을 제안한다. 충돌 검출은 카메라와 마커 패턴의 좌표계 및 버블의 3차원 공간위치, 그리고 3차원 모델 데이터를 이용하여 구현한다. 제안 시스템은 ARToolkit을 기반으로 제작되었으며, 시각적인 마커 기반 시스템으로 버블의 움직임과 사용자의 인터랙션을 통해, 버블 포핑의 증강현실을 전달한다. 향후, 현재 개발 중인 포스 피드백 기능이 있는 진동촉각공간 햅틱 마우스와 접목하여 보다 실감적인 증강현실 기술을 개발할 예정이다.

• Journal of the Institute of Electronics Engineers of Korea SC
• /
• v.47 no.4
• /
• pp.47-54
• /
• 2010

We propose a smart human-computer interface replacing conventional mouse interface. The interface is able to control cursor and command action with only hand performing without object. Four finger motions(left click, right click, hold, drag) for command action are enough to express all mouse function. Also we materialize cursor movement control using image processing. The measure what we use for inference is entropy of EMG signal, gaussian modeling and maximum likelihood estimation. In image processing for cursor control, we use color recognition to get the center point of finger tip from marker, and map the point onto cursor. Accuracy of finger movement inference is over 95% and cursor control works naturally without delay. we materialize whole system to check its performance and utility.