• Journal of KIISE:Software and Applications
• /
• v.29 no.11
• /
• pp.851-859
• /
• 2002

This paper discusses the design of a working system that visually recognizes hand gestures for the control of a window based user interface. We present a method for tracking the fingertip of the index finger using a single camera. Our method is based on CAMSHIFT algorithm and performs better than the CAMSHIFT algorithm in that it tracks well particular hand poses used in the system in complex backgrounds. We describe how the location of the fingertip is mapped to a location on the monitor, and how it Is both necessary and possible to smooth the path of the fingertip location using a physical model of a mouse pointer. Our method is able to track in real time, yet not absorb a major share of computational resources. The performance of our system shows a great promise that we will be able to use this methodology to control computers in near future.

• Journal of Korea Multimedia Society
• /
• v.15 no.11
• /
• pp.1377-1383
• /
• 2012

This paper proposes a human mouse system that replaces mouse input by human hand movement. As the resolution of monitors increases, it is not quite possible, due to the resolution difference between web cameras and monitors, to place the cursor in the entire range of a monitor by simply moving the pointer which recognizes the position of the hand from the web camera. In this regard, we propose an effective method of placing the position of the mouse, without repeating the returning hand movements, in the corners of the monitor in which the user wants it to be. We also proposes the recognition method of finger movements in terms of using thumb and index finger. The measurement that we conducted shows the successful recognition rate of 97% that corroborates the effectiveness of our method.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2011.01a
• /
• pp.173-174
• /
• 2011

본 논문에서는 마우스 제어를 위한 손 인식 시스템을 제안한다. 이를 위하여 배경영상과 입력영상의 차영상을 이용하여 움직임 영역을 구하고, RGB 컬러모델을 HSV 컬러모델로 변환하여 피부색상과 유사한 영역을 얻는다. 이 둘 사이의 교집합을 통하여 손 후보 영역을 추출하고 모폴로지 연산을 통해 잡음을 제거한 후 손 영상을 추출한다. 추출한 손 영상을 모폴로지 연산을 이용하여 손바닥 영역과 손가락 영역으로 분리한 다음 손바닥 영역의 위치정보를 마우스의 좌표로, 손가락의 개수를 마우스 이벤트로 정의하여 마우스를 제어한다. 실험 결과는 제안된 시스템이 마우스 제어에 효과적으로 사용될 수 있음을 보이고 있다.

• Information and Communications Magazine
• /
• v.28 no.6
• /
• pp.11-20
• /
• 2011

근래 다양한 형태의 멀티미디어 콘텐츠가 광범위하게 소비됨에 따라 단방향의 평면적 콘텐츠가 제공하는 시점의 한계에서 벗어나 사용자에게 보다 다양한 시점의 영상을 제공함으로써 사용자가 원하는 시점을 선택할 수 있는 실감형 콘텐츠에 대한 욕구가 증가하고 있다. 이러한 실감형 콘텐츠 중 하나인 파노라마 영상은 다수의 카메라를 통해 획득된 영상들을 하나의 영상으로 이어 붙여 넓은 시야의 영상을 제공함으로써 증대된 현장감과 몰입감을 제공하며 사용자 시점의 자유도를 증가시킬 수 있다. 사용자에게 파노라마 서비스를 제공할 때 마우스, 리모콘과 같은 정형적인 인터페이스가 아니라 사용자의 선호도에 따라 손쉽게 파노라마 공간을 제어할 수 있는 사용자 친화적인 인터페이스 기술이 함께 제공된다면 사용자가 느낄 수 있는 현실감과 몰입감은 배가될 것이다. 따라서 본 고에서는 현존하는 파노라마 기술 및 사용자 인터페이스 기술의 동향에 대해 알아보고, 상기 기술들의 결합을 통해 보다 사실적인 미디어 소비 환경을 제공하기 위한 사용자 친화적인 고품질의 휴먼융합형 파노라마 서비스에 대해 소개하고자 한다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2010.07a
• /
• pp.509-510
• /
• 2010

본 논문에서는 마우스 제어를 위한 불변 모멘트 기반의 손 인식 알고리즘을 제안한다. 이를 위하여 배경영상과 입력영상의 차이를 구하고, RGB 컬러모델을 HSV 컬러모델로 변환하여 피부색상과 유사한 영역을 얻었다. 이 둘 사이의 교집합을 통하여 손 영역을 추출하고 모폴로지 연산을 통해 잡음을 제거한 다음 불변 모멘트를 이용하여 손 영역을 인식하였다. 제안된 방법은 손의 이동, 크기 변화, 회전에 무관하게 손을 인식할 수 있다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2006.11a
• /
• pp.113-116
• /
• 2006

컴퓨터의 급속한 발전 속도와 맞물려 사용자의 위지나 몸짓, 감성을 인지하는 보다 편리하고 자연스러운 휴먼 인터페이스에 대한 요구가 늘어나고 있다. 휴면 인터페이스 가운데 응시 위치 추적은 현재 사용자가 쳐다보고 있는 위치를 컴퓨터 시각 인식 방법을 통하여 파악하는 연구이다. 본 논문에서는 여러 감성 컴퓨터 인터페이스 중 눈동자를 통해 컴퓨터의 입력장치를 간접적으로 제어하는 방법에 대해 기술한다. 웹 카메라를 통해 입력 받은 영상을 이용하여 눈동자의 위치 이동을 탐색하여 마우스를 제어한다.

• Journal of KIISE:Software and Applications
• /
• v.36 no.12
• /
• pp.1028-1033
• /
• 2009

This paper presents a real-time hand gesture recognition approach for controlling a computer. We define hand gestures as continuous hand postures and their movements for easy expression of various gestures and propose a Two-layered Bayesian Network (TBN) to recognize those gestures. The proposed method can compensate an incorrectly recognized hand posture and its location via the preceding and following information. In order to vertify the usefulness of the proposed method, we implemented a Virtual Mouse interface, the gesture-based interface of a physical mouse device. In experiments, the proposed method showed a recognition rate of 94.8% and 88.1% for a simple and cluttered background, respectively. This outperforms the previous HMM-based method, which had results of 92.4% and 83.3%, respectively, under the same conditions.

• Journal of Korea Multimedia Society
• /
• v.11 no.3
• /
• pp.373-385
• /
• 2008

The evolution of input device for computer has pretty much slowed down after the introduction of mouse as feinting input device. Even though stylus and touch screen were invented later on which provide some alternatives, all these methods were designed to have close range interaction with computer. There are not many options available for user to interact with computer from afar, which is especially needed during presentation. Therefore, in this paper, we try to fill the gap by proposing a laser pointer interaction system to allow user to give pointing input command to the computer from some distance away using only laser pointer, which is cheap and readily available. With the combination of image processing based software, we could provide mouse-like pointing interaction with computer. The proposed system works well not only in currently plane screen, but also in flexible screen by incorporating the feature of non-linear coordinate mapping algorithm in our system so that our system can support non-linear environment, such as curved and flexible wall.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.07a
• /
• pp.490-493
• /
• 2011

최근 사용자와 컴퓨터간의 상호작용이 가능한 사용자 인터페이스(UI, User Interface)에 대한 연구가 활발히 진행되고 있다. 이중 키보드나 마우스, 리모컨과 같은 별도의 입력장치가 없이 뇌의 활동으로부터 발생하는 생체신호를 이용하여 사용자의 생각만으로 컴퓨터와 커뮤니케이션을 할 수 있는 뇌만으로 컴퓨터와 커(BCI, Brain-Computer Interface) 시스템이 각광을 받고 있다. 본 연구에서는 뇌의 생체신호로는 뇌전도도(EEG, Electroencephalogram)를 사용하였으며, 이를 통하여 P300 speller 실험을 수행하였다. P300 speller 실험을 통하여 발생된 뇌전도도를 취합하여 P300(사건 관련 전위(ERP, Event-related potential)에서 자극 제시 약 300msec 후에 정점에 달하는 정파)을 분석하였다.

• Journal of the Korean Institute of Intelligent Systems
• /
• v.11 no.1
• /
• pp.82-87
• /
• 2001

본 논문에서는 마우스 대신에 음성으로 명령을 입력하여 퍼지 추론을 통해 위도우 화면상의 커서를 이동시키는 인터페이스를 구현하였다. 입력된 음성이 대체로 짧은 언어이기에 이를 인식하기 위하여 고립단어 인식에 강한 DTW방식을 사용하였다. DTW방식의 단점중인 하나가 음성길이가 비슷한 명령을 입력하였을 때 표준패턴 중 오차 값이 가장 작은 패턴으로 인식하는 것이다. 예를 들면 \"아주 많이 이동해\"하는 음성이 입력되었을 때 비슷한 음성길이를 가진 \"아주 많이 오른쪽\"으로 인식하는 경우가 있다. 이런 오류를 해결하고자 각 패턴의 DTW오차 거리 값과 표준 패턴의 음성길이를 기준으로 임계값을 퍼지 추론하여 명령으로서의 수락 여부를 결정하였다. 판단이 애매한 부분은 사용자에게 질의를 하여 응답에 따라 수락 여부를 결정하였다.