• 한국콘텐츠학회논문지
• /
• 제11권5호
• /
• pp.194-204
• /
• 2011

테이블탑 디스플레이는 대형 화면에 손동작을 통하여 입출력이 이루어지므로 사용자와 시스템 간의 직관적인 상호작용이 가능하다. 일반적으로 에듀테인먼트 콘텐츠는 사용이 편한 직관적 상호작용을 필요로 하기 때문에 테이블탑 디스플레이는 에듀테인먼트 콘텐츠 구현에 매우 적합하다. 본 논문은 이러한 테이블 탑 디스플레이 인터페이스를 활용한 전통요리 에듀테인먼트 콘텐츠 제작 기술에 대해 설명한다. 이 기술은 요리에 필요한 손동작을 테이블탑 디스플레이에 터치 제스처 형식으로 직접 가할 수 있어 기존의 에듀테인먼트 콘텐츠의 한계를 벗어나 몰입강화와 협동 작업에 의한 향상된 교육효과를 얻을 수 있다. 제안한 기술을 콘텐츠로 구현하여 그 효과를 확인하였고 향후 다양한 제스처와 상호작용을 추가하여 그 유용성을 향상 할 계획이다.

• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제9권4호
• /
• pp.420-430
• /
• 2003

본 논문에서는 멀티모달(multi-modal) 인터페이스를 통해 지능적 가상검객과 체감형 검도게임을 할 수 있는 시스템을 제안한다. 제안된 검도게임 시스템은 멀티모달 인터페이스(시각과 청각), 인공지능(AI), 피드백(스크린과 사운드) 등 크게 세 가지 모듈로 구성된다. 첫 번째로, 멀티모달 인터페이스는 시각기반, 3차원 인터페이스를 이용하여 사용자가 자유롭게 3차원 공간에서 움직일 수 있도록 하고, 음성기반 인터페이스를 이용하여 사용자가 현실감 있는 검도게임을 즐길 수 있도록 한다. 두 번째, 인공지능은 가상검객에게 멀티모달 인터페이스에서 입력되는 시각과 음성을 인식하여 가상검객의 반응을 유도한다. 마지막으로, 대형 스크린과 스피커를 통한 시청각 피드백은 체감형 상호작용을 통하여 사용자가 몰입감을 느끼며 검도게임을 경험할 수 있도록 한다. 따라서 제안된 시스템은 전신의 움직임으로 사용자에게 몰입감의 검도게임을 제공한다. 제안된 시스템은 오락 외에 교육, 운동, 예술행위 등 다양한 분야에 적용될 수 있다.

• 한국콘텐츠학회논문지
• /
• 제10권9호
• /
• pp.1-8
• /
• 2010

본 논문에서는 제스처 인식 대형 놀이 시스템을 기반으로한 한자 학습 콘텐츠에 대해 제안한다. 제안한 시스템은 두 대의 적외선 영상에서 사용자의 포즈를 예측하는 부분과 연속된 포즈들로부터 제스처를 인식하는 부분으로 구성되어 있다. 그리고 각각의 적외선 카메라에서 하나의 포즈에 대한 정면 포즈와 옆면 포즈로 나눠서 획득한 후 이를 사용하여 HMM의 모델을 이용하여 제스처를 분류하였다. 사용자와 컴퓨터간 의사소통에 있어서, 장치를 사용하지 않고 사용자의 행동에 의한 조작을 통해 사용자가 쉽게 조작할 수 있고 편리함을 제공하였다. 또한 두 개의 대형 디스플레이와 다양한 멀티미디어 요소를 이용하여 몰입과 흥미를 유발시킬 수 있기 때문에 정보 전달을 극대화할 수 있다. 단순한 주입식 교육 콘텐츠가 아닌 에듀테인먼트 콘텐츠인 한자 학습 콘텐츠는 게임과 교육을 동시에 제공하여 사용자에게 재미와 흥미를 주어 자연스레 한자를 습득할 수 있고 제스처 기반 대형 놀이 시스템과 결합하면서 사용자에게 놀면서 배울 수 있는 시너지 효과를 기대할 수 있다.