• The Journal of the Korea Contents Association
• /
• v.7 no.2
• /
• pp.84-91
• /
• 2007

Recently, the researches based on vision about user attention and action awareness are being pushed actively for human computer interaction. Among them, various applications of tabletop display system are developed more in accordance with touch sensing technique, co-located and collaborative work. Formerly, although supported only one user, support multi-user at present. Therefore, collaborative work and interaction of four elements (human, computer, displayed objects, physical objects) that is ultimate goal of tabletop display are realizable. Generally, tabletop display system designs according to four key aspects. 1)multi-touch interaction using bare hands. 2)implementation of collaborative work, simultaneous user interaction. 3)direct touch interaction. 4)use of physical objects as an interaction tool. In this paper, we describe a critical analysis of the state-of-the-art in advanced multi-touch sensing techniques for tabletop display system according to the four methods: vision based method, non-vision based method, top-down projection system and rear projection system. And we also discuss some problems and practical applications in the research field.

• Proceedings of the Korean Information Science Society Conference
• /
• 2010.06b
• /
• pp.184-187
• /
• 2010

본 논문에서는 터치 제스처의 인식을 위해 시도된 여러 방법 중 테이블탑 디스플레이상에서 HMM을 이용한 제스처의 학습과 사용에 대해 제안한다. 터치 제스처는 제스처의 획(stroke)에 따라 single stroke와 multi stroke로 분류할 수 있다. 그러므로 제스처의 입력은 영상프레임에서 터치 궤적에 따라 변하는 방향 벡터를 이용하여 방향코드로 분석될 수 있다. 그리고 분석된 방향코드를 기계학습을 통하여 학습시킨 후, 인식실험에 사용한다. 제스처 인식 학습에는 총 10개의 제스처에 대하여 100개 방향코드 데이터를 이용하였다. 형태를 갖추고 있는 제스처는 미리 정의되어 있는 제스처와 비교를 통하여 인식할 수 있다. (4 방향 드래그, 원, 삼각형, ㄱ ㄴ 모양 >, < ) 미리 정의되어 있는 제스처가 아닌 경우에는 기계학습을 통하여 사용자가 의미를 부여한 후 제스처를 정의하여 원하는 제스처를 선택적으로 사용할 수 있다. 본 논문에서는 테이블탑 디스플레이 환경에서 사용자의 터치제스처를 인식하는 시스템을 구현하였다. 앞으로 테이블탑 디스플레이 환경에서 터치 제스처 인식에 적합한 알고리즘을 찾고 멀티터치 제스처를 인식하는 연구도 이루어져야 할 것이다.

• Proceedings of the Korea Contents Association Conference
• /
• 2006.11a
• /
• pp.616-621
• /
• 2006

Recently, the researches based on vision about user attention and action awareness are being pushed actively for human computer interaction. Among them, various applications of tabletop display system are developed more in accordance with touch sensing technique, co-located and collaborative work. Formerly, although supported only one user, support multi-user at present. Therefore, collaborative work and interaction of four elements (human, computer, displayed objects, physical objects) that is ultimate goal of tabletop display are realizable. Generally, tabletop display system designs according to four key aspects. 1)multi-touch interaction using bare hands. 2)implementation of collaborative work, simultaneous user interaction. 3)direct touch interaction. 4)use of physical objects as an interaction tool. In this paper, we describe a critical analysis of the state-of-the-art in advanced multi-touch sensing techniques for tabletop display system according to the four methods: vision based method, non-vision based method, top-down projection system and rear projection system. And we also discuss some problems and practical applications in the research field.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2007.11a
• /
• pp.108-110
• /
• 2007

본 논문에서는 테이블 탑 디스플레이 기반 증강현실을 이용한 전통문화 콘텐츠 제작에 대하여 기술한다. 멀티 터치가 가능한 지능형 인터페이스 플랫폼인 테이블 탑 디스플레이를 기반으로 동시의 여러 사용자가 시스템을 조작 할 수 있다. 테이블 탑 디스플레이는 새로운 형태의 컴퓨터시스템으로 디스플레이가 되는 동시에 별도의 디바이스나 콘솔을 필요로 하지 않고 터치로 입력이 가능한 상호작용 시스템이다. 이러한 테이블 탑 디스플레이 위에 구동되는 콘텐츠는 역사적인 유물을 사진으로 보여주면서 역사적인 의미를 설명하고 있다. 그리고 여기에 게임적인 요소를 가미하여 어린이들이 즐겁게 게임을 하면서 우리나라 전통문화 체험을 할 수 있는 시스템이다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2008.05a
• /
• pp.19-21
• /
• 2008

본 논문에서는 테이블 형이 아닌 스탠드형 테이블 탑 디스플레이에 대한 연구를 다루고 있다. 스크린에 대한 터치를 인식으로 입력을 받아들이므로 TouchFace III 라고 명명하고 있으며, 기존에 개발되었던 두 대의 테이블 탑 디스플레이와는 형태에서 차별을 두고 있다. TouchFace III 시스템은 FTIR(Frustrated Total Internal Reflection : 내부 전반사 장애 현상) 방식이 아닌 TouchLight방식과 HoloWall방식을 조합하여 시스템을 구성하였다. 그래서 스크린에서의 직접적인 손터치 뿐만 아니라, 스크린에 반사되는 손형상에 대한 제스처까지도 인식할 수 있도록 연구중에 있다. 이는 협업을 강조하는 테이블 탑 디스플레이의 컨셉에 어울리며 한 디바이스를 이용하여 동시에 여러사용자가 디바이스를 조작하는 것을 가능하게 한다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2013.07a
• /
• pp.73-74
• /
• 2013

터치 디스플레이 기술이 발달함에 따라 이를 이용한 스마트 폰을 비롯한 스마트 테이블, 스마트 월 등 다양한 HW 플랫폼들이 대두되고 있다. 특히, 터치 디스플레이의 대형화가 가능해짐에 따라 이를 기반으로 다양한 서비스가 제공될 것으로 예상된다. 이를 이용하는 서비스들은 멀티 터치를 기반으로 한명 이상의 사용자 입력을 필요로 할 수 있다. 이에 따라 터치 디스플레이의 주요 입력 도구인 가상 키보드 역시 마찬가지의 요구사항이 있다. 본 논문에서는 리눅스 환경에서 차세대 윈도우즈 매니저(Wayland/Weston)을 기반으로 가상 키보드 등록, 생성 및 사용 과정에 대해 분석하고, 멀티 가상 키보드를 지원하는 윈도우 매니저를 설계 및 구현한다.

• 한국HCI학회:학술대회논문집
• /
• 2007.02a
• /
• pp.561-566
• /
• 2007

본 논문에서는 실감형 요리 시스템의 제작에 대하여 기술한다. 실감형 요리 시스템은 요리를 만드는 과정을 컴퓨터를 이용해 가상적으로 체험해 볼 수 있게 한다. 증강현실 기술을 이용, 모의부엌에서 요리 재료 카드를 인식함으로써 요리재료를 요리 용기에 투입하고 투입된 요리 재료는 증강현실 부엌에 나타나게 된다. 또한 멀티 터치가 가능한 지능형 인터페이스 플랫폼인 테이블 탑 디스플레이를 기반으로 증강현실 오브젝트와 사용자가 서로 상호작용할 수 있도록 한다. 테이블 탑 디스플레이에서의 터치와 hand gesture를 인식하여 맨손의 손동작에 의해 상호작용을 구현한다. 이 시스템은 특히 어린이들을 대상으로 하여 실감나는 요리 체험을 할 수 있으며, 요리 과정을 보다 효과적으로 학습하는데 활용될 수 있다.

• Proceedings of the IEEK Conference
• /
• 2008.06a
• /
• pp.719-720
• /
• 2008

마우스나 키보드를 벗어나 직관적인 손을 이용하는 테이블 탑 디스플레이는 대부분 Touch 정보를 이용한다. 직접적인 터치에 손 형상 및 제스처를 이용할 수 있다면 보다 자유롭게 시스템을 컨트롤 할 수 있을 것이다. 본 논문에서는 테이블 탑 디스플레이에서의 손형상 인식을 기술한다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2010.06a
• /
• pp.112-116
• /
• 2010

본 논문에서는 테이블탑 디스플레이을 기반으로한 RealBook에 대하여 제안한다. 전자책은 일반 종이책이 아닌 컴퓨터를 이용한 가상의 책으로써 사용자가 독서를 하는 도중 동영상 자료를 보거나 배경음악을 들을 수 있게 해주는 멀티미디어 콘텐츠이다. 또한, 테이블탑 디스플레이 플랫폼에서 사용하므로 손의 직접적인 터치를 이용하여 전자책과 사용자 간의 좀 더 다양한 상호작용이 가능하도록 한다. 테이블탑 디스플레이에서는 손가락의 터치 점을 이용하여 다양한 제스처를 정의할 수 있어서, 사용자가 기존 입력 장치에 비해 보다 효과적으로 전자책을 체험하는 것을 돕는다. 본 논문에서는 제안하는 방법은 기존 전자책과 차별화된 상호작용 디지털와 아날로그를 결함한 책(Real book)으로써 전자책에 대한 새로운 방향을 제시할 수 있고, 미디어 아트와 스토리텔링 기법을 접목시켜 사용자에게 정보 전달뿐만 아니라 예술과 오락 등을 제공할 수 있다. 앞으로 컴퓨터와 사용자간의 상호작용을 원활하게 할 수 있어 다양한 어플리케이션 개발에 활용될 수 있고 향후 미래 지향적 시스템이 될 것이다.

• Journal of the Institute of Convergence Signal Processing
• /
• v.11 no.1
• /
• pp.13-18
• /
• 2010

Most of the research in the multi-touch area is based on the FTIR(Frustrated Total Internal Re리ection), which is just implemented by using the previous approach. Moreover, there are not the software solutions to improve a performance in the multi touch-blobs detection or the user gesture recognition. Therefore, we implement a multi-touch table-top display that is based on the DI(Diffused Illumination), the improved touch-points detection and user gesture recognition. The proposed method supports a simultaneous transformation multi-touch command for objects in the running application. Also, the system latency time is reduced by the proposed ore-testing method in the multi touch-blobs detection processing. Implemented device is simulated by programming the Flash AS3 application in the TUIO(Tangible User Interface Object) environment that is based on the OSC(Open Sound Control) protocol. As a result, Our system shows the 37% system latency reduction, and is successful in the multi-touch gestures recognition.