• Journal of Computational Design and Engineering
• /
• 제1권3호
• /
• pp.153-160
• /
• 2014

As smartphones came into wide use recently, it has become increasingly popular not only among young people, but among middle-aged people as well. Most smartphones adopt capacitive full touch screen, so touch commands are made by fingers unlike the PDAs in the past that use touch pens. In this case, a significant portion of the smartphone's screen is blocked by the finger so it is impossible to see the screens around the finger touching the screen; this causes difficulties in making precise inputs. To solve this problem, this research proposes a method of using simple AR markers to improve the interface of smartphones. A marker is placed in front of the smartphone camera. Then, the camera image of the marker is analyzed to determine the position of the marker as the position of the mouse cursor. This method can enable click, double-click, drag-and-drop used in PCs as well as touch, slide, long-touch-input in smartphones. Through this research, smartphone inputs can be made more precise and simple, and show the possibility of the application of a new concept of smartphone interface.

• 디지털콘텐츠학회 논문지
• /
• 제15권3호
• /
• pp.381-386
• /
• 2014

멀티터치 기술은 IT 기술의 발전과 함께 다양한 형태의 인식기술로 자리매김하고 있는 기술 중에 하나이다. 컴퓨터와 인간이 상화작용을 하는데 있어 필요한 기술이면서 자연스러운 인터페이스를 설계하는데도 영향을 준다. 최대한 인간과 컴퓨터가 상호작용을 통해 직관적으로 다가갈 수 있게 됨으로써 많은 사용자들이 배우지 않아도 감각적으로 기능을 구현하고, 사용할 수 있다면 편리할 것이다. 본 논문에서는 스마트 테이블 환경의 인터페이스를 설계하는데 있어 기존의 투터치 기반이 아닌 실질적인 멀티터치를 통해 모든 손가락을 사용할 수 있도록 하는데 목적을 한다. 나날이 발전하는 유비쿼터스 환경을 통해 전자칠판, 전자책상 등 가구와 IT가 접목한 산업도 활발히 이뤄지고 있기 때문에 멀티터치 기반의 인터페이스 설계는 중요할 것으로 예측된다. 멀지 않은 미래에는 교육 환경에 새로운 방식으로 첨단화를 접목시킴으로써 회의를 하기 위한 스마트 테이블뿐만이 아닌 다양한 IoT 환경에서도 영향을 미칠 것으로 기대해 본다.

• 한국산업정보학회논문지
• /
• 제21권1호
• /
• pp.35-42
• /
• 2016

재생되는 동영상에서 정지, 재생, 캡쳐, 확대, 축소 등의 다양한 이벤트 제공은 스마트폰과 같은 작은 크기의 모니터에서 가능하다. 그러나, 모니터의 크기가 커지게 되면, 터치 인식에 대한 비용이 증가하게 되어, 터치를 통한 이벤트 제공은 사실상 불가능하다. 본 논문에서는 저렴하게 깊이 정보로 터치를 인식하고, 단일 및 다중 터치로 토글, 핀치-인/아웃 등의 다양한 이벤트를 부여하는 영상 이벤트 제어시스템을 제안한다. 깊이 카메라로부터 얻어진 깊이 정보로 터치된 위치와 터치 경로를 찾고, 터치 제스처 종류를 파악한다. 이러한 터치 인터페이스 알고리즘은 소형 싱글보드 시스템에서 구현하고, UART 통신을 통해 제스처 정보를 전송함으로써 영상 이벤트를 제어할 수 있다. 모의실험을 바탕으로 대형 스크린에서 제안한 깊이 터치 방법으로 다양한 영상 이벤트를 제어할 수 있음을 보인다.

• 한국HCI학회논문지
• /
• 제12권4호
• /
• pp.37-44
• /
• 2017

Eye-typing은 인간-컴퓨터 상호작용의 일종으로 시선의 위치 정보를 기반으로 하는 입력 체계이다. 눈동자의 움직임 이외의 물리적 행위를 필요로 하지 않아 거동이 어려운 전신마비 환자들을 위한 입력 수단으로 널리 사용된다. 하지만 eye-typing을 위한 한글 기반의 인터페이스는 거의 제시되지 않은 것이 현실이다. 이에 본 연구에서는 한글 입력에 최적화된 eye-typing 입력 체계를 구현하였다. 우선 큰 잡음과 Midas touch problem으로 대표되는 eye-typing의 특성을 고려하여 설계 목표를 정립하였다. 잡음 문제를 해결하기 위해 개별 버튼의 크기를 극대화하기 위해 단계식 입력 체계를 도입하였고 Midas touch problem을 해결하기 위해 입력 영역 중간에 시선 보류 영역을 두었다. 다음으로 각 음절이 자음과 모음의 조합으로 생성되는 한글의 언어학적 특성에 대한 고찰을 바탕으로 두 종류의 eye-typing 인터페이스를 설계하였다. 각각 자모 일체형, 자모 분리형 인터페이스로 정의한 두 인터페이스는 한글의 자모음을 유형화하여 단계적으로 입력하도록 구현되었다. 그리고 이들의 성능을 검증하기위해 한글 두벌식자판과 비교하고 입력 과정에서 시선의 동선을 분석하는 실험을 수행하였다. 그 결과, 제시한 인터페이스가 실용적인 eye-typing 수단으로 활용될 가능성이 충분함을 확인하였다.

• 디지털융복합연구
• /
• 제13권11호
• /
• pp.337-348
• /
• 2015

터치 인터페이스 입력방식에서 메뉴를 마우스를 이용하여 입력하는 것 보다 터치입력 방식이 의도하지 않는 터치와 입력의 어려움이 증가하고 있다. 본 연구에서는 버튼메뉴의 최소 형상버튼을 기준으로 형태와 크기변화에 따라서 사용성 평가를 분석하고자 한다. 적용방법으로는 터치 입력방식의 인터페이스 디자인에서 활용 할 수 있도록 회귀 모형식과 인터페이스 인간 수행 평가방법의 대표적인 모형인 피츠의 법칙(Fitts' Law)의 비교분석을 통해서 더욱 효과적인 정량적 수행예측 평가 모형식 적용을 통해서 가능성을 확인하고자 했다. 따라서 터치 환경에서 적용할 수 있는 버튼의 형상과 크기변화에 따른 사용자의 사용시간을 고려한 수행예측시간을 디자인에 반영할 수 있다.

• 융합신호처리학회논문지
• /
• 제11권1호
• /
• pp.13-18
• /
• 2010

멀티터치 관련 연구는 전반사 장애 현상(FTIR: Frustrated Total Internal Reflection)의 원리를 기반으로 기존 방법을 이용하여 단지 구현하는 것이 대부분이다. 또한 멀티 터치점(Blob-Points) 검출이나 사용자 제스쳐 인식에 있어서 성능 향상을 위한 소프트웨어적 해법에 관한 연구는 드문 실정이다. 따라서 본 논문에서는 확산 투광(DI: Diffused Illumination) 방식을 기반으로 개선된 터치점 검출과 사용자 제스쳐 인식에 의한 멀티터치 테이블-탑 디스플레이를 구현한다. 제안된 방법은 실행 중인 어플리케이션 내의 객체들을 위한 동시 변형 멀티터치 명령을 지원하며, 제안한 사전 테스팅(Pre-Testing) 방법에 의해서 멀티 터치점 검출 과정에서 시스템 지연 시간의 감소가 가능하다. 구현된 멀티터치 테이블-탑 디스플레이 장치는 OSC(Open Sound Control) 프로토콜을 기반으로 하는 TUIO(Tangib1e User Interface Object) 환경에서 Flash AS3 어플리케이션을 제작하여 시뮬레이션 한 결과 최대 37% 시스템 지연 시간의 감소와 멀티터치 제스쳐 인식에서 성공적인 결과를 보였다.

• 한국산업정보학회논문지
• /
• 제16권3호
• /
• pp.65-72
• /
• 2011

멀티터치 디스플레이 시스템은 참여자가 별도의 부가장치 없이 다양한 인터랙티브 미디어에 손쉽게 접근할 수 있는 기술로 최근 큰 각광을 받고 있다. 특히 마이크로소프트사의 서피스 (Microsoft Surface)와 같이 벽면형 디스플레이 이외에 원형의 디스플레이 상에서의 멀티터치 기술이 상용화됨에 따라 보다 다양한 형태의 탠저블 인터페이스로서의 가능성을 보였다. 본 논문 에서는 이를 확장하여 구형이 아닌 볼록형(Convex) 불규칙 표면을 대상으로 영상을 디스플레이 하고 디스플레이된 콘텐츠와 참여자의 상호작용이 가능한 멀티터치 인터랙션 시스템을 제안한다. 이러한 제안 방법은 각종 탠져블 인터페이스, 예를 들어 디오라마 기반의 전시 시스템이나 체감형 아케이드 게임에서 효율적으로 사용될 수 있다.

• 전기학회논문지
• /
• 제64권3호
• /
• pp.465-472
• /
• 2015

This paper presents a visual touch recognition for NUI(Natural User Interface) using Voronoi-tessellation algorithm. The proposed algorithms are three parts as follows: hand region extraction, hand feature point extraction, visual-touch recognition. To improve the robustness of hand region extraction, we propose RGB/HSI color model, Canny edge detection algorithm, and use of spatial frequency information. In addition, to improve the accuracy of the recognition of hand feature point extraction, we propose the use of Douglas Peucker algorithm, Also, to recognize the visual touch, we propose the use of the Voronoi-tessellation algorithm. Finally, we demonstrate the feasibility and applicability of the proposed algorithms through some experiments.

• 한국항행학회논문지
• /
• 제14권6호
• /
• pp.928-934
• /
• 2010

본 논문에서는 적외선 빛을 이용하여 터치를 인식하고 어플리케이션을 구동할 수 있는 방법에 대하여 소개한다. 화면에 터치하면 그 곳의 빛을 적외선 카메라가 촬영을 하고, 촬영된 영상은 영상처리를 통해 ID, 좌표 등을 구한 후 TUIO Protocol로 Application에 통신 한다. 전달된 정보를 통해 Application에서 이벤트를 발생하여 구동하게 되는 원리이다. 본 논문에서는 터치를 이용한 Application은 Android Phone과 사진을 주고받을 수 있는 모바일 사진 관리 Application, 여러 사용자가 동시에 합주를 할 수 있는 음악연주 Application에 대해 설명한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.240-244
• /
• 2009

In this paper, we present FloatingPad, a touch pad based device with better scrolling feature and more interaction styles than a traditional touch pad. When we interact with a real object like a picture or a book, we manipulate on the object, and we also move, rotate, and flip the object. We applied this idea into a touch pad. In FloatingPad, the touch pad is not fixed to the device. It is floating on the device; it can be slid on the device. Therefore a user can have additional degree of freedom of input by shifting and rotating the touch pad while having the traditional touch pad input. By using this technique, the interactivity of the touch pad can be augmented, and better scrolling feature can be provided by reducing clutching occurs on the position scrolling devices by using the movement of the touch pad as rate control. We implemented the prototype device and conducted a user study with three applications developed for FloatingPad.