• 한국멀티미디어학회논문지
• /
• 제23권12호
• /
• pp.1454-1463
• /
• 2020

An important factor in eye-tracking PC interface for general paralyzed patients is the implementation of the mouse interface, for manipulating the GUI. With a successfully implemented mouse interface, users can generate mouse events exactly at the point of their choosing. However, it is difficult to define this interaction in the eye-tracking interface. This problem has been defined as the Midas touch problem and has been a major focus of eye-tracking research. There have been many attempts to solve this problem using blink, voice input, etc. However, it was not suitable for general paralyzed patients because some of them cannot wink or speak. In this paper, we propose a mouth-pop-up, eye-tracking mouse interface that solves the Midas touch problem as well as becoming a suitable interface for general paralyzed patients using a common RGB camera. The interface presented in this paper implements a mouse interface that detects the opening and closing of the mouth to activate a pop-up menu that the user can select the mouse event. After implementation, a performance experiment was conducted. As a result, we found that the number of malfunctions and the time to perform tasks were reduced compared to the existing method.

• 한국멀티미디어학회논문지
• /
• 제14권9호
• /
• pp.1210-1220
• /
• 2011

본 논문에서는 PC 상의 가상환경과 사용자간의 몰입형 상호작용 인터페이스로서 햅틱 마우스 시스템을 제안한다. 제안하는 햅틱 마우스는 진동감각 및 온열감을 제공하여 몰입감을 높인다. 진동 모듈은 편심모터와 솔레노이드 액추에이터로 구성하였으며 온열감 모듈은 작은 필름형태의 온도 센서와 펠티어 효과기반의 열 펌프를 이용하여 구축한다. 본 햅틱 마우스 시스템의 효용성을 보이기 위해 레이싱 게임 어플리케이션을 제작한 후 이를 사용하여 실험을 수행한다. 실험 결과로부터 제안하는 햅틱 마우스가 가상환경에서 몰입감을 증가시키며 가상환경과 사용자간의 효과적인 인터페이스로 사용될 수 있음을 증명한다.

• 한국지능시스템학회:학술대회논문집
• /
• 한국퍼지및지능시스템학회 2003년도 ISIS 2003
• /
• pp.138-141
• /
• 2003

This paper proposes conceptual fuzzy sets for picture reference system with visual user interface and command recognition system without keyboard and mouse. The picture reference system consists of the associative picture database, the visual user interface and command recognition system. The associative picture database searches pictures by using conceptual fuzzy sets. To show pictures attractive, the visual user interface provides some visual effect functions. The command recognition unit, without keyboard and mouse, captures user's hand by camera and informs it to the system as a command. We implement and evaluate the picture reference system.

• 대한의용생체공학회:의공학회지
• /
• 제24권5호
• /
• pp.411-419
• /
• 2003

본 연구에서는 교통사고나 뇌졸중 등에 의해 상지의 장애를 가지는 장애인을 대상으로 하여, 인터넷의 브라우저와 같은 소프트웨어를 사용 할 수 있도록 하는 컴퓨터 인터페이스를 구현하는 것을 목적으로 한다. 이 인터페이스는 커서를 제어하기 위해 머리 움직임의 정보를 이용한다. 실제 시스템은 머리의 수평, 수직 각속도를 검출하여 컴퓨터로 전송하는 하드웨어부분과, 전송 받은 신호를 처리하여 마우스의 움직임과 클릭신호로 변환하는 소프트웨어 부분으로 구성하였다. 클릭신호는 순간적인 끄덕임으로 정의하였으며 특히, 인공신경망이 각 사용자별 클릭 패턴을 학습하여 사용자 친화적인 인터페이스를 제공하도록 하였다. 구현된 시스템의 성능을 클릭의 인식률, 커서의 이동제어오차, 이동출현하는 목표박스의 단위시간당 클릭율의 세가지 항목으로 평가하였다. 또한. 일반적으로 사용되는 광마우스와 본 연구에서 개발한 자이로마우스를 각각 이 실험에 사용하여, 양자간의 차이를 비교하였다. 개발된 자이로마우스에서 클릭의 인식률은 평균 93%였고, 커서의 수평수직 이동 제어오차는 광마우스의 1.4∼1.5배였다. 랜덤위치에 출현하는 50픽셀의 목표박스의 클릭률은 광마우스의 40% (30 클릭/분)의 성능을 보였으며, 시행횟수에 따라 증가하여 l회차의 35%에서 3회차에는 44%로 단조증가하는 경향을 보였다. 제안된 시스템은, 장애인에게 사회와 의사소통 할 수 있는 새로운 가능성을 제시할 것이 기대된다.

• 대한인간공학회지
• /
• 제29권5호
• /
• pp.763-770
• /
• 2010

The use of web widgets on desktop and mobile devices has been increasing rapidly. Web widgets provide access to activities and information from various sources across the web. As the number of supported widgets increases, managing widgets and finding relevant or interesting widgets becomes more complex. In addition, interacting with widgets in web service systems can be difficult, especially for novice users. Up to this point, there has been little research on web widget usability. This paper performs an experimental study regarding user interfaces of web widgets based on the mouse tracking and work-flow analysis. In the experiment, four sites providing widget services are chosen - iGoogle, Netvibes, My yahoo, and Wizard. The experiment participants perform three assigned tasks in the chosen sites, and their mouse operations are recorded using Camtasia, a screen casting software. Mouse tracking analysis is performed based on the recorded data in order to analyze common user behaviors. In addition, work-flow diagrams representing the operational flows to carry out the given tasks in each web site are constructed so as to visually and systematically analyze detailed usage patterns. The experimental study results presented in this paper can contribute to developing guidelines for highly usable and accessible interface design of web widgets.

• 한국멀티미디어학회논문지
• /
• 제6권3호
• /
• pp.469-480
• /
• 2003

정보화 사회라고 할 수 있는 현 사회에서 정확한 사용자 인증 기술은 가장 중요 이슈가 되고 있다. 대부분 인증 기술은 시스템에 접근하고자 하는 사용자의 특성을 이용하여 신분확인을 수행하는 기술로써 본 논문에서는 현재 전자상거래 시스템에서 대부분 지불수단으로 사용되고 있는 신용카드와 계좌이체를 기본으로 한 전자상거래 쇼핑몰을 구축하고, 전자화폐가 가지고 있는 위조와 도난의 위험을 보완할 수 있는 소유하는 것에 대한 인증으로 결제 단계에서 마우스 제스처(Mouse Gesture)를 이용한 사용자 인증 인터페이스를 제안하고 구현하였다. 마우스 제스처를 이용한 사용자 인증 인터페이스는 사용자가 입력한 패턴의 고유값이 학습알고리즘을 통해 저장된 결과 패턴의 값들과 비교를 하여 인지의 성공 여부를 화면에서 바로 알 수 있도록 하는 것으로서 쇼핑몰을 통하여 물품을 구입하고 대금 결제 시에 지불정보와 함께 사인정보를 함께 입력하면 전자화폐가 가지고 있던 도난이나 위조에 대한 위험성을 줄일 수 있다는 장점이 있다.

• 대한전기학회:학술대회논문집
• /
• 대한전기학회 2006년도 제37회 하계학술대회 논문집 D
• /
• pp.1821-1823
• /
• 2006

This paper presents a development of interface device for electro-oculogram(EOG) signal and it's application to the wireless mouse of wearable PC. The interface device is composed of five bio-electrodes for detecting oculomotor motion, several band-pass filters, instrumentation amplifier and a microprocessor. we have first analyzed impedance characteristics between skin and a bio-electrode. since the impedance highly depends on human face, it's magnitude differs from person. this interface device was applied to develop a wireless mouse for wearable PC, as a Bio Machine Interface(BMI). Where in the prompt on PC monitor is controlled by only EOG signals. this system was implemented in a Head Mount Display(HMD) unit. experimental results show the accuracy of above 90%.

• 한국멀티미디어학회논문지
• /
• 제20권2호
• /
• pp.396-403
• /
• 2017

In recent years, the use of touch screens has expanded, and devices such as remote controllers have been developed in various ways to control and access contents at long range. The wireless-based touch screen is used in classroom, seminar room, and remote video conversation in addition to the TV remote control. The purpose of the study is to design a smart phone-based intuitive interface that can perform the role of a wireless mouse and a wireless keyboard at range using Bluetooth and to develop an application that integrates functions of a mouse and a keyboard. Firstly, touch interaction model for controlling software such as PowerPoint by connecting to a general PC on a smart phone has been studied. The most simple touch operation interface is used to reproduce the function of existing devices and design more simply. The studies of the extension of interfaces with various functions are important, but development of optimized interfaces for users will become more important in the future. In this sense, this study is valuable.

• 인터넷정보학회논문지
• /
• 제16권6호
• /
• pp.11-21
• /
• 2015

Human-Computer Interaction(HCI)에 대한 관심도가 높이지면서, HCI에 대한 연구도 활발히 진행되고 있다. 이와 더불어 사용자의 몸짓이나 음성을 이용하는 Natural User Interface/Natural User eXperience(NUI/NUX)에 대한 연구도 활발히 진행되고 있다. NUI/NUX의 경우, 제스처 인식이나 음성 인식 등의 인식 알고리즘이 필요하다. 하지만 이러한 인식 알고리즘은 전처리, 정규화, 특징 추출과 같은 단계를 거쳐야하기 때문에 구현이 복잡하고, 트레이닝에 많은 시간을 투자해야 한다는 단점이 있다. 최근에는 NUI/NUX 개발 도구로 Microsoft 사의 Kinect가 개발되어 개발자와 일반인들에게 많은 관심을 받고 있고, 이를 이용한 다양한 연구가 진행 중에 있다. 본 저자들의 이전 연구에서도 사용자의 신체적 특징을 이용하여 뛰어난 직관성을 가진 핸드 마우스를 구현하였다. 하지만 마우스의 움직임이 부자연스럽고 정확도가 낮아 사용자가 사용하기 다소 어려웠다는 단점이 있다. 본 연구에서는 Kinect를 통해 사용자의 신체적 특징을 실시간으로 추출하고, 이를 이용해 가상 모니터라는 새로운 개념을 추가한 핸드 마우스 인터페이스를 설계하고 구현하였다. 가상 모니터는 사용자의 손으로 마우스를 제어할 수 있는 가상의 공간을 의미한다. 이를 통해 가상 모니터 상의 손의 좌표를 실제 모니터 상의 좌표로 정확하게 매핑(mapping)이 가능하다. 가상 모니터를 사용함으로써 이전 연구의 장점인 직관성을 유지하고, 단점인 정확도를 높일 수 있다. 추가적으로 뇌파 집중 지표를 이용해 사용자의 불필요한 행동을 인식하여 핸드 마우스 인터페이스의 정확도를 높였다. 제안하는 핸드 마우스의 직관성과 정확성을 평가하기 위하여 10대부터 50대까지 50명에게 실험을 하였다. 직관성 실험 결과로 84%가 1분 이내에 사용방법을 터득하였다. 또한 동일한 피실험자에게 일반적인 마우스 기능(드래그, 클릭, 더블클릭)에 대해 정확성 실험을 한 결과로 드래그 80.9%, 클릭 80%, 더블 클릭 76.7%의 정확성을 보였다. 실험 결과를 통해 제안하는 핸드 마우스 인터페이스의 직관성과 정확성을 확인하였으며, 미래에 손으로 시스템이나 소프트웨어를 제어하는 인터페이스의 좋은 예시가 될 것으로 기대된다.

• 한국정보통신학회논문지
• /
• 제13권8호
• /
• pp.1721-1728
• /
• 2009

미래형 컴퓨터 인터페이스는 기존의 마우스에서 사람의 손 또는 눈 등으로 대체되고 있다. 본 연구에서는 자이로센서를 이용하여 장갑형 무선 마우스를 개발하였다. 이는 사람의 손동작이 마우스 커서 움직임을 대신한다. 그리고 블루투스 기반의 무선센서 네트워크 기술을 도입하여 마우스와 시스템간의 연결을 무선화하여 유선마우스가 갖는 활동의 제약성을 극복하였다. 또한 USB 포트 인터페이스를 사용하여 설치 및 사용이 용이하도록 하였다. 개발한 장갑형 무선마우스는 프리젠테이션이나 게임 등의 다양한 사용자 인터렉션을 필요로 하는 분야에 포인팅 입력장치로 활용될 수 있는 가능성을 확인할 수 있었다.