• Proceedings of the Korean Society of Computer Information Conference
• /
• 2011.01a
• /
• pp.173-174
• /
• 2011

본 논문에서는 마우스 제어를 위한 손 인식 시스템을 제안한다. 이를 위하여 배경영상과 입력영상의 차영상을 이용하여 움직임 영역을 구하고, RGB 컬러모델을 HSV 컬러모델로 변환하여 피부색상과 유사한 영역을 얻는다. 이 둘 사이의 교집합을 통하여 손 후보 영역을 추출하고 모폴로지 연산을 통해 잡음을 제거한 후 손 영상을 추출한다. 추출한 손 영상을 모폴로지 연산을 이용하여 손바닥 영역과 손가락 영역으로 분리한 다음 손바닥 영역의 위치정보를 마우스의 좌표로, 손가락의 개수를 마우스 이벤트로 정의하여 마우스를 제어한다. 실험 결과는 제안된 시스템이 마우스 제어에 효과적으로 사용될 수 있음을 보이고 있다.

• Journal of the HCI Society of Korea
• /
• v.5 no.2
• /
• pp.1-6
• /
• 2010

In this research, we designed the head mouse system for disabled and gamers, a mouse controller which can be controlled by head movements and eye blinks only, and compared its performance with other regular mouse controller systems. The head mouse was moved by a gyro-sensor, which can measure an angular rotation of a head movement, and the eye blink was used as a clicking event of the mouse system. Accumulated errors caused by integral, which was a problem that previous head mouse system had, were removed periodically, and treated as dead zones in the non-linear relative point graph, and direct mouse point control was possible using its moving distance and acceleration calculation. We used the active light sources to minimize the influence of the ambient light changes, so that the head mouse was not affected by the change in external light source. In a comparison between the head mouse and the gazing tracking mouse (Quick Glance), the above method resulted about 21% higher score on the clicking event experiment called "20 clicks", about 25% higher on the dasher experiment, and about 37% higher on on-screen keyboard test respectively, which concludes that the proposed head mouse has better performance than the standard mouse system.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2008.11a
• /
• pp.211-214
• /
• 2008

본 논문에서는 카메라로부터 획득된 영상을 이용하여 손을 인식하고 이를 통해 실시간으로 마우스 포인터를 제어하는 알고리즘을 제안한다. 기존의 상호 작용 멀티미디어 시스템은 펜이나 마우스등과 같은 특정 외부 입력장치들에 의존하였기 때문에 사용자에게 불편함을 주었다. 따라서 본 논문에서는 외부 입력장치가 필요 없는 손 인식 알고리즘을 이용하여 이러한 단점을 보완하였다. 제안하는 알고리즘은 카메라로부터 획득된 영상에 저주파 필터를 통과시킨 후 색 정보를 이용하여 손 영역과 배경을 분리하고, 분리된 손 영역의 중심 좌표를 이용하여 모니터 상의 마우스 포인터 좌표를 결정한다. 또한 손의 중심을 원점으로 하는 가변적인 크기의 원과 손가락과의 교차점을 이용하여 손가락의 개수를 계산하고, 이를 통해 마우스의 특정 동작을 결정한다. 제안한 알고리즘은 90% 이상의 높은 손 인식률을 나타내었으며, 스테레오 카메라를 이용한 3차원 실시간 상호작용 멀티미디어 시스템에도 적용이 가능할 것으로 기대된다.

• 한국HCI학회:학술대회논문집
• /
• 2008.02b
• /
• pp.323-328
• /
• 2008

Inflatable Mouse is a volume-adjustable user interface. It can be inflated up to the volume of a familiar mouse, but be deflated and stored flat in a PC card slot of a laptop computer when not in use. Inflatable Mouse functions just like a typical mouse; moreover, it provides new interaction techniques by sensing the air pressure in the balloon of the mouse. It also addresses some issues associated with pressure-sensing interactions such as the lack of bi-directional control and the lack of effective feedback. Moreover, it can be used as both a control tool and a display tool. In this paper, the design of an Inflatable Mouse prototype is described and potential application scenarios such as zooming in/out and fast scrolling using pressure control are explained. We also discuss the potential use of Inflatable Mouse as an emotional communication tool.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 2003.11a
• /
• pp.101-103
• /
• 2003

일상생활에서 컴퓨터 사용은 많은 시간을 차지하고 있다. 다한 증상의 사용자나 환자가 장시간 컴퓨터 마우스를 사용하게 되면 손의 땀으로 작업 중 불편함을 겪게 된다. 본 연구에서는 땀 발생으로 변화되는 피부 전도도 (저항)의 변화를 전압의 변화로 측정하여, 측정된 전압 값이 지정된 번호에 포함되면 자동으로 송풍 팬이 구동되는 컴퓨터용 마우스를 개발하였다. 사용자의 땀 분비와 관련된 피부 전도도의 변화는 마우스에 부착된 금속 전극을 이용하여 측정하였고, DAQ 보드를 통해 컴퓨터(PC)에 전달하고 user interface 창에 디스플레이 시키도록 하였다. 마우스 패드 아래에 부착된 송풍 팬의 구동 제어는 LabVIEW Program을 이용하였다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2015.07a
• /
• pp.196-197
• /
• 2015

본 논문에서는 산업용 컴퓨터에서 사용할 마우스와 터치스크린을 이용한 산업용 컴퓨터 인터페이스 장치 구현에 대하여 연구하였다. 산업용 제어 현장에서 사용되는 제어용 컴퓨터의 입출력 장치는 확장성을 고려하여 설계되지 않았기 때문에 현재의 컴퓨터 주변장치를 직접 사용할 수 없는 경우가 대부분이다. 본 논문에서는 산업용컴퓨터에서 사용되는 라이트펜과 모니터를 현재 주로 사용하는 마우스와 LCD모니터로 입출력이 가능하도록 하는 인터페이스 장치를 개발하여, 생산 공정에서 사용하는 산업용 컴퓨터의 활용도를 높이고자 한다. 산업용 컴퓨터 인터페이스장치는 ARM 기반 MPU를 이용하여 영상 신호와 외부 입력장치의 자료를 처리하고, CPLD에서 생성된 신호를 제어용 컴퓨터로 입력하였다. 제어컴퓨터의 영상신호를 다양한 모니터와 인터페이스 할 수 있도록 비디오 스케일러(Video Scaler)를 사용하였다. 구현한 인터페이스 장치는 다양한 장치들을 산업용컴퓨터에서 사용이 가능함을 보였다.

• Journal of the Institute of Electronics Engineers of Korea SC
• /
• v.46 no.4
• /
• pp.70-76
• /
• 2009

We proposed the device to control a computer mouse with only head movements and eye blinks so that disabilities by car or other accidents can use a computer. The mouse position were estimated from a gyro-sensor which can measure head movements, and the mouse events such as click/double click were from opto sensors which can detect the eyes flicker, respectively. The sensor was mounted on the goggle in order not to disturb the visual field. There was no difference in movement speed between ours and a general mouse, but it required 3$\sim$4 more times in the result of the experiment to evaluate spatial movements and events detection of the proposed mouse because of the low accuracy. We could eliminate cumbersome work to periodically remove the accumulated error and intuitively control the mouse using non-linear relative point method with dead zones. Optical sensors are used in the event detection circuitry designed to remove the influence of the ambient light changes, therefore it was not affected in the change of external light source.

• KIISE Transactions on Computing Practices
• /
• v.21 no.8
• /
• pp.531-536
• /
• 2015

The speech recognition is an active research area in the human computer interface (HCI). The objective of this study is to control digital devices with voices. In addition, the mouse is used as a computer peripheral tool which is widely used and provided in graphical user interface (GUI) computing environments. In this paper, we propose a method of controlling the mouse with the real-time speech recognition function of a smartphone. The processing steps include extracting the core voice signal after receiving a proper length voice input with real time, to perform the quantization by using the learned code book after feature extracting with mel frequency cepstral coefficient (MFCC), and to finally recognize the corresponding vowel using hidden markov model (HMM). In addition a virtual mouse is operated by mapping each vowel to the mouse command. Finally, we show the various mouse operations on the desktop PC display with the implemented smartphone application.

• Journal of Korea Multimedia Society
• /
• v.15 no.11
• /
• pp.1377-1383
• /
• 2012

This paper proposes a human mouse system that replaces mouse input by human hand movement. As the resolution of monitors increases, it is not quite possible, due to the resolution difference between web cameras and monitors, to place the cursor in the entire range of a monitor by simply moving the pointer which recognizes the position of the hand from the web camera. In this regard, we propose an effective method of placing the position of the mouse, without repeating the returning hand movements, in the corners of the monitor in which the user wants it to be. We also proposes the recognition method of finger movements in terms of using thumb and index finger. The measurement that we conducted shows the successful recognition rate of 97% that corroborates the effectiveness of our method.

• Proceedings of the Korea Multimedia Society Conference
• /
• 2002.11b
• /
• pp.474-477
• /
• 2002

HMD를 연결한 지능정보단말을 휴대하여 이동 중이거나 작업 중에 유무선 네트워크에 접속하여 원하는 정보를 편리하게 획득하기 위해서는 보다 손쉬운 사용자 인터페이스가 요구된다. 데이터 글로브를 이용한 촉각 인터페이스는 지능정보단말상에서 구현되는 웹 브라우저의 네비게이션이나 미디어 재생기의 명령어 제어를 기존의 PC상의 키보드나 마우스없이 보다 효율적으로 구현하기 위해 필요한 인터페이스이다. 지능정보단말상에서의 데이터 글러브를 이용하여 각각의 손 동작에 대응하는 적절한 제어 신호를 정의함으로써, 웹 브라우징이나 미디어 재생기의 기본적인 제어를 사용자가 마치 마우스를 사용하듯이 이동 중이거나 작업 중에도 손쉽게 할 수 있도록 다비이스 드라이버 상에서 구현한다.