• 대한인간공학회지
• /
• 제31권4호
• /
• pp.585-591
• /
• 2012

Objective: The aim of this study is to propose the contactless gesture-based interface on smart mobile devices for especially rhythm action games. Background: Most existing approaches about interactions of smart mobile games are tab on the touch screen. However that way is such undesirable for someone or for sometimes, because of the disabled person, or the inconvenience that users need to touch/tab specific devices. Moreover more importantly, new interaction can derive new possibilities from stranded game genre. Method: In this paper, I present a smart mobile game with contactless gesture-based interaction and the interfaces using computer vision technology. Discovering the gestures which are easy to recognize and research of interaction system that fits to game on smart mobile device are conducted as previous studies. A combination between augmented reality technique and contactless gesture interaction is also tried. Results: The rhythm game allows a user to interact with smart mobile devices using hand gestures, without touching or tabbing the screen. Moreover users can feel fun in the game as other games. Conclusion: Evaluation results show that users make low failure numbers, and the game is able to recognize gestures with quite high precision in real time. Therefore the contactless gesture-based interaction has potentials to smart mobile game. Application: The results are applied to the commercial game application.

• 한국멀티미디어학회논문지
• /
• 제15권7호
• /
• pp.870-878
• /
• 2012

최근의 많은 컴퓨터 기술의 발전과 센서 기술의 발전의 결합으로 매우 다양한 형태의 사용자 경험에 기반한 사용자 인터페이스(User interface) 기술들이 출현하고 있다. 본 연구에서는 적외선 영상을 이용한 스마트 터치 프로젝터 시스템 기술에 관한 연구와 그 결과를 소개한다. 제안된 시스템에서는 사용자가 빔 프로젝터를 사용할 때 적외선 펜을 이용하여 이벤트를 발생시키면 적외선 영상센서를 통하여 그 이벤트를 인식하여 마우스 이벤트를 발생시키는 기법을 제안한다. 입력되는 펜의 움직임 추출과 추적을 기반으로 움직임 이벤트 패턴을 설계하였으며, 입력 영상 화면과 실제 사용하는 하드웨어의 해상도에 차이가 있기 때문에 이 오차를 최소화 하기 위해서 화면 좌표보정 알고리즘을 제안한다. 이러한 기술은 빔 프로젝터에 간단한 프로세서만 장착이 된다면 다른 이동식 노트북 등이 필요 없이 언제든지 회의나 발표 등을 진행할 수 있는 차세대 휴먼-컴퓨터 상호작용(Human-Computer Interaction) 기술이다.

• 대한전자공학회논문지SD
• /
• 제47권2호
• /
• pp.68-76
• /
• 2010

최근 터치스크린 기술은 인간이 컴퓨터와 대화할 수 있는 주요 도구로서 급진적인 발전을 이루고 있다. 이 사용자 친화적인 인터페이스는 휴대폰에 이어 데스크탑, TV와 같은 대형스크린 시장까지 확산되어가고 있지만 기존의 저항막방식, 정전용량방식, 초음파방식 등은 기술 및 비용문제로 인하여 중 대형스크린에 적용하기 힘들다. 따라서 본 논문에서는 적외선과 라인스캔 이미지센서를 이용하여 간단하고 저렴한 비용으로 중 대형스크린에 적용할 수 있는 광학 영상 터치스크린 솔루션을 소개하고 이 기술이 갖는 문제점과 해결방안을 제시한다. 멀티 포인트를 추출하기 위한 주요 알고리즘은 범용프로세서를 이용하여 구현 시 약 34ms(29fps)가 소요되었으며 이는 휴먼인터페이스 디바이스로 사용되기에는 불충분하였다. 이를 해결하기 위하여 본 논문에서는 신호처리 및 좌표추출연산을 위한 하드웨어를 설계하여 성능을 향상시키고 광학 영상 터치스크린이 갖는 문제점을 소프트웨어에서 효율적으로 처리할 수 있도록 하였다. 설계한 터치스크린 컨트롤러의 PSM(Power Saving Mode)은 1.8Wh의 적외선 소비에너지를 0.0072Wh 까지 개선하였으며 60인치 대형스크린에서 2개의 실제 좌표를 200fps 속도로 연산해낸다.

• 한국지능시스템학회논문지
• /
• 제21권6호
• /
• pp.718-723
• /
• 2011

본 논문에서는 비젼 카메라를 이용한 비주얼 멀티 터치 입력 장치를 제안한다. 제안된 입력 장치는 비젼 카메라를 이용하므로 기존 스마트 폰에서 사용하는 터치 스크린 입력 장치에 비해 non-touch로 명령을 입력할 수 있다는 장점이 있다. 또한, 제안된 장치는 컴퓨터 계산 시간이 짧아 실시간 구현이 가능하고, 카메라외에 다른 장치가 필요 없으므로 존재하는 입력장치보다 싸다는 장점이 있다. 이를 위해, 먼저, HSV 컬러 모델과 라벨링 방법을 이용한 영상 처리 알고리즘을 제안한다. 그 다음, 손이 움직이는 영역의 정확성을 개선하기위해, 기하학적인 특징점, 동심원, 칼만 필터에 기본한 움직임 인식 알고리즘을 제안한다. 마지막으로, 제안된 장치는 비디오 게임, 스마트 TV, 컴퓨터등을 원격으로 제어할 수 있음을 실험을 통해 보인다.

• 대한인간공학회지
• /
• 제29권4호
• /
• pp.655-659
• /
• 2010

The objective of this study is to quantitatively incorporate user observation into usability evaluation of mobile interfaces using monitoring techniques in first- and third-person points of view. In this study, an experiment was conducted to monitor and record users' behavior using Ergoneers Dikablis, a gaze tracking device. The experiment was done with 2 mobile phones each with a button keypad interface and a touchscreen interface for comparative analysis. The subjects included 20 people who have similar experiences and proficiency in using mobile devices. Data from video recordings were coded with Noldus Observer XT to find usage patterns and to gather quantitative data for analysis in terms of effectiveness, efficiency and satisfaction. Results showed that the button keypad interface was generally better than the touchcreen interface. The movements of the fingers and gaze were much simpler when performing given tasks on the button keypad interface. While previous studies have mostly evaluated usability with performance measures by only looking at task results, this study can be expected to contribute by suggesting a method in which the behavioral patterns of interaction is evaluated.

• 한국해양공학회지
• /
• 제24권3호
• /
• pp.64-71
• /
• 2010

This paper summarizes the development of an ART control system panel with a touch screen and sensors to measure the roll and roll rate of ships. The control system hardware consists of two micro-processors, analog and digital I/O circuits, various relay circuits, etc. Sensor fusion and moving cross algorithms are implemented to accurately estimate the roll angle and roll period. In addition, the control system adopts a fault detection algorithm to inform users of ART system faults. A touch screen in the control panel can display the ART system states and faults. The performance of the developed system was verified on real sea trials.

• 대한전기학회:학술대회논문집
• /
• 대한전기학회 2005년도 심포지엄 논문집 정보 및 제어부문
• /
• pp.203-205
• /
• 2005

A reactor protection system (RPS) plays the roles of generating the reactor trip signal and the engineered safety features (ESF) actuation signal when the monitored plant processes reach predefined limits. A Korean project group is developing a new digitalized RPS and the Cabinet Operator Module (COM) of the RPS which is used for the RPS integrity testing and monitoring by an equipment operator. A flat panel display (FPD) with a touch screen capability is provided as a main user interface for the RPS operation. To support the RPS COM user interface design, actually the FPD screen design, we developed a user interface style guide because the system designer could not properly deal with the many general human factors design guidelines. To develop the user interface style guide, various design guideline gatherings, a walk-though with a video recorder, guideline selection with respect to user interface design elements, determination of the properties of the design elements, discussion with the system designers, and a conversion of the properties into a screen design were carried out. This paper describes the process in detail and the findings in the course of the style guide development.

• 조명전기설비학회논문지
• /
• 제13권1호
• /
• pp.111-118
• /
• 1999

함반영 촉각장치(Force-Reflecting haptic Interface)는 인간이 컴퓨터에 의해 생성한 가상의 세계에 손의 위치 정보를 제공하고 가상의 손이 가상 환경에 접촉했을 때 인간에게 촉각을 전달하는 장치이다. 본 논문에서는 컴플라이언스 제어가 비교적 용이한 초음파 모터 액츄에이터를 사용하여 직접구동 방식으로 촉각장치를 설계하였다. 렌더링 알고리즘을 이용하여 가상의 벽, 가상 버튼, 가상 구멍 등의 기본적인 역감실험을 한 결과 힘 반영에 의한 역감을 제시받을 수 있었다.

• Journal of Electrical Engineering and Technology
• /
• 제1권3호
• /
• pp.287-294
• /
• 2006

Recently, switchboards for MV/LV distribution customers have been united and digitalized rapidly. This paper proposes the effective information visualization method for the data measured from cubicle switchboards for MV/LV distribution customers. We developed the algorithm that analyzes abundant data measured by switchboards and displays them to overall users, such as fire information index, power condition index, switchboard safety index, and power diminution index. Using a touch screen made users to operate it easily. User interface was also improved by taking graphic visualization. We guess the information visualization method suggested in this paper shows the new direction that heavy electrical equipments including switchboards are going to develop in the future.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.763-768
• /
• 2009

사용자 중심의 인터페이스를 설계하기 위해서는 작업 환경에 따른 사용자의 작업 특성 및 이와 관련된 인지 과정에 대한 분석이 선행되어야 한다. 하지만 손가락을 직접 사용하는 새로운 작업 환경인 터치스크린을 적용하는 다수의 기기들은 바뀐 작업 환경에 대한 고려 없이 마우스나 키보드 등의 입력 방식에서의 메뉴 구조를 그대로 따르고 있어 사용자에게 불필요한 움직임 및 인지적 과정을 야기시켜 사용성의 저하를 가져오고 있다. 이에 본 연구에서는 터치스크린에서의 한 손가락 작업 환경의 물리적 특성 및 이에 따른 사용자들의 보다 단순한 인지 과정을 고려한 동적인 메뉴 구조를 제안하였다. 그 결과 사용자들은 동적인 메뉴구조에서 보다 빠른 작업 수행 경향을 보였으며, 인지적 과정에 있어서도 그 시간이 적게 소요되는 경향을 보였다. 본 연구 결과, 터치스크린 환경에서의 작업 특성 및 인지 과정을 고려한 동적인 메뉴 구조는 정적인 메뉴 구조보다 일반적인 사용자 중심의 메뉴 기반 인터페이스를 설계하는데 유용하게 쓰일 것으로 보인다.