• 한국멀티미디어학회논문지
• /
• 제14권9호
• /
• pp.1210-1220
• /
• 2011

본 논문에서는 PC 상의 가상환경과 사용자간의 몰입형 상호작용 인터페이스로서 햅틱 마우스 시스템을 제안한다. 제안하는 햅틱 마우스는 진동감각 및 온열감을 제공하여 몰입감을 높인다. 진동 모듈은 편심모터와 솔레노이드 액추에이터로 구성하였으며 온열감 모듈은 작은 필름형태의 온도 센서와 펠티어 효과기반의 열 펌프를 이용하여 구축한다. 본 햅틱 마우스 시스템의 효용성을 보이기 위해 레이싱 게임 어플리케이션을 제작한 후 이를 사용하여 실험을 수행한다. 실험 결과로부터 제안하는 햅틱 마우스가 가상환경에서 몰입감을 증가시키며 가상환경과 사용자간의 효과적인 인터페이스로 사용될 수 있음을 증명한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.1-5
• /
• 2009

본 연구에서는 몰입형 인간 컴퓨터 상호작용을 위한 햅틱 마우스 시스템을 제작한다. 제작한 햅틱 마우스는 진동감각 뿐 아니라 온열감도 제공하기 때문에 사용자는 더욱 몰입감 있게 가상의 공간을 경험할 수 있다. 진동 감각과 온열감을 제공하기 위하여 편심모터들과 솔레노이드, 그리고 펠티어 엑츄에이터를 이용하였으며 제작한 시스템의 평가를 위하여 레이싱 게임 프로토타입을 구현하여 테스트를 수행한다. 실험결과로부터 본 햅틱 마우스는 가상 공간에서 사용자에게 사실감을 전달함을 알 수 있다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2010년도 하계학술대회
• /
• pp.205-207
• /
• 2010

본 논문에서는 버블포핑을 구현하는 증강현실 기법을 제안한다. 제안 기법은 진동촉각햅틱 마우스, 비디오 입력용 웹캠, 마커 패턴 영상, 그래픽 구 버블 객체, 그래픽 마우스 등으로 구성된다. 마우스의 이동에 따라 그래픽 마우스가 3차원 공간상에서 이동하면서 버블과의 충돌이 발생하게 되면, 충돌시 발생하는 버블의 이벤트로 fade-out과 diverge and fade-out의 버블 효과를 구현한다. 제안 시스템은 ARToolkit 및 OpenGL을 기반으로 제작되었으며, 시각적인 마커 기반 시스템으로 버블의 움직임과 사용자의 인터랙션을 통해, 버블 포핑의 증강현실을 전달한다.

• 방송공학회논문지
• /
• 제15권6호
• /
• pp.715-722
• /
• 2010

본 논문에서는 증강현실 응용으로 진동촉각 햅틱 마우스를 이용하여 버블 포핑을 구현하는 버블포핑 증강현실 시스템을 제안한다. 이 시스템에서는 가상 그래픽 버블이 3차원 공간에서 랜덤하게 떠다닌다. 사용자의 진동촉각마우스가 버블과 접촉하면 버블이 터지는 포핑이 발생한다. 또한 포핑 효과와 더불어, 마우스가 진동을 함으로써 마우스를 잡고 있는 사용자의 손에 보다 실감나는 버블포핑을 전달한다. 제안 시스템은 진동촉각마우스, 비디오 입력용 웹캠, 마커 패턴 영상, 그래픽 구 버블 객체, 그래픽 마우스 등으로 구성된다. 버블과의 충돌이 발생하게 되면, 마우스 진동과 버블 포핑의 두가지 효과를 동시에 제공한다. 버블포핑 이벤트로 페이드 아웃 및 발산 이드 아웃 기법을 제안한다. 따라서 시각 및 촉각 버블 포핑은 단일 효과보다 실감있는 증강현실을 전달한다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 2003년도 봄 학술발표논문집 Vol.30 No.1 (B)
• /
• pp.630-632
• /
• 2003

컴퓨터 가상현실 기술은 반복적인 교육과 훈련을 필요로 하는 의료 시뮬레이션 분야에 도입되어 시술 훈련, 수술 계획 및 수술 시뮬레이션 등의 영역에 응용되고 있다. 3차원적 가시화나 네비게이션에 치중하던 기존의 의료 시뮬레이션에 보다 현실감을 증진시키기 위해서는 인체 해부학적 기관의 변형성과 사용자와 대상 기관 사이의 물리적인 상호작용이 반영되어야 한다. 본 연구에서는 기존의 2차원 및 3차원 마우스만을 사용하던 상호작용 환경을 개선하여 시술 동작시 물리적인 역감을 전달받을 수 있는 햅틱 인터페이스를 도입하고. 보다 현실감 있는 시각적 디스플레이를 위해 햅틱 워크벤치를 사용하였다. 사용자의 햅틱 인터페이스 조작에 따른 가상 인체 기관의 물리적 변형 및 이에 따른 물리적 역감은 삼각메쉬를 이용한 매스-스프링 모델을 사용하여 구현하였고. 가상 시술 도구와 가상 인체 기관와의 빠른 충들 감지를 위해서는 OBBTree를 적용하였다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2006년도 학술대회 1부
• /
• pp.219-224
• /
• 2006

3 차원 입력 장치는 키보드나 마우스 같은 일반적인 입력 장치로는 받아 들이기 어려운 3 차원 입력을 사용자로부터 간편하고 직관적인 방법으로 받아들일 수 있다는 측면에서 활발히 연구 및 사용되고 있다. 또한 햅틱 장치는 가상 물체의 조작에 따른 시각적인 피드백 외에 가상 물체의 느낌을 피드백 힘을 통해 사용자에게 전달해 줌으로써 컴퓨터와 사용자간의 상호 작용에 큰 도움을 준다. 본 논문은 햅틱 피드백이 적용된 실시간 가변형 모델과 효과적인 3 차원 입력에 대한 기반 연구를 하고자 한다. 그리고 이에 대한 한 가지 사례로써 햅틱 장치를 이용한 가상 판화 시스템을 제작 한다. 가상 판화 시스템은 시각 처리 부분과 촉각 처리 부분, 그리고 사용자의 3 차원 입력을 돕는 인터페이스 부분으로 구성되어 있다. 시각 처리 부분은 3 차원 공간 상에서 사용자의 조각에 따른 판화 표면의 변형을 처리하며 촉각 처리 부분은 실제 판화를 제작할 때 느끼는 촉각을 햅틱 인터페이스를 이용하여 사용자에게 전달한다. 이를 위해 먼저 시각 처리 부분에서는 NURBS 기반의 자유 형상 변형 (FFD)기법을 이용하였는데 가상 조각도에 의한 물체 표면의 지역적인 변형을 구현하기 위해 조각도가 닿는 부분에 대해 기조 격자점 (control point)을 증가시켜 원하는 부분에 대한 지역적인 변화를 용이하도록 하였고 다음으로 촉각 처리 부분에서는 S-chain 모델을 이용하였는데 S-chain 모델을 객체 전체에 적용하지 않고 접촉이 일어날 경우 그 접촉점을 기준으로 S-chain 모델을 지역적으로 적용하는 방법을 고안하여 실제 구현에 이용하였다. 인터페이스 적인 측면에서 사용자의 3 차원 입력장치를 통한 인터렉션은 사용자로 하여금 보다 자유로운 입력을 허용하지만 이에 따른 깊이 지각 문제를 발생시킨다. 이러한 문제를 최소화 시키고 사용자의 깊이 지각을 강화시키기 위해 사용자에게 제공되는 시각적 자극을 변형시키고 다양한 정보를 제공하도록 하였다. 가상 판화 시스템은 가상 환경에서 사용자의 조작에 따른 다양한 결과물을 제작 및 출력해 볼 수 있도록 해준다. 또한 가상 환경에서 이러한 기반을 제공함으로써 가상 환경의 장점인 복사, 이동 및 영구 보존 특성을 동시에 얻을 수 있다. 본 논문은 이러한 작업을 위한 기반 기술로써 햅틱 및 가변형 모델, 3 차원 입력 장치에 대한 시각적 인터페이스에 대해 다루고 이 기반 기술을 바탕으로한 가상 판화 시스템의 구현에 대하여 논하고자 한다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2008년도 학술대회 3부
• /
• pp.25-29
• /
• 2008

기존의 가상 시작품은 3D 그래픽스를 이용하여 모델링된 제품 영상을 제공하였다. 이러한 가상 시작품은 단지 전통적인 입력 장치인 키보드와 마우스를 이용하여 다룰 수 있을 뿐, 조작부를 사용자가 직접 만져보고 조작하는 것은 불가능했다. 본 논문에서는 사용자가 실제 제품을 조작하는 듯한 느낌을 얻을 수 있도록 하는, 실감가상시작을 위한 햅틱 다이얼을 시스템을 제안한다. 햅틱 다이얼은 모터를 통해 사용자가 실제의 기계적인 다이얼과 유사한 감을 느낄 수 있도록 제어된다. 또한, 사용자가 다이얼을 조작하는 정보는 시스템에 입력되어 가상시작품이 작동하는 모습을 화면상에서 확인할 수 있도록 하였다. 이러한 실감 가상시작 시스템은 사용자 피드백을 통해, 설계 프로세스 초기 단계에서부터 제품 인터페이스를 디자인할 수 있도록 도움을 줄 것이다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2009년도 추계학술대회
• /
• pp.371-374
• /
• 2009

가상 현실과 현실 세계가 공존하는 증강 현실은 현재 및 향후 실감미디어 콘텐츠에 중요한 역할을 할 것으로 기대된다. 증강 현실은 게임, 엔터테인먼트, 교육 분야 등에서 응용에 따라 다양한 기술들의 결합이 요구된다. 본 논문에서는 교육적 효과를 주는 버블 포핑 증강 현실 기법을 제안한다. 버블 포핑 시스템은 비디오 입력용 웹캠, 마커 패턴 영상, 그래픽 구 버블 객체, 그래픽 마우스 등으로 구성된다. 일반 마우스의 이동에 따라 그래픽 마우스가 3차원 공간상에서 이동하면서 버블과의 충돌이 발생하게 되면, 충돌시 발생하는 버블의 이벤트로 동적 움직임, 터짐 등의 버블 효과를 구현할 수 있는 방법을 제안한다. 충돌 검출은 카메라와 마커 패턴의 좌표계 및 버블의 3차원 공간위치, 그리고 3차원 모델 데이터를 이용하여 구현한다. 제안 시스템은 ARToolkit을 기반으로 제작되었으며, 시각적인 마커 기반 시스템으로 버블의 움직임과 사용자의 인터랙션을 통해, 버블 포핑의 증강현실을 전달한다. 향후, 현재 개발 중인 포스 피드백 기능이 있는 진동촉각공간 햅틱 마우스와 접목하여 보다 실감적인 증강현실 기술을 개발할 예정이다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2008년도 학술대회 2부
• /
• pp.323-328
• /
• 2008

"부풀어지는 마우스"는 부피가 변하는 유저 인터페이스 기기이다. 이 마우스는 우리가 흔히 사용하는 마우스의 부피만큼 부풀어지는 것뿐만 아니라 사용하지 않을 때에는 납작하게 줄어들어 노트북 컴퓨터의 PC 카드 슬롯에 보관될 수 있다. 이 기기는 일반 마우스와 동일하게 사용 가능할 뿐만 아니라 마우스 풍선 안의 기압을 측정함으로써 새로운 인터랙션을 제공해 주고 있다. 또한 이 기기는 기존에 압력 센싱 인터랙션이 갖고 있는 한계점인 양방향 제어와 효율적인 피드백의 부재를 해결하고 있다. 나아가 제어 수단뿐만 아니라 표현의 수단으로도 활용 가능하다. 본 논문에서는 부풀어지는 마우스의 프로토타입 디자인에 대해서 설명하고 압력제어를 통해 줌인과 같은 응용 가능한 시나리오를 소개하고자 한다. 또한, 감성 및 커뮤니케이션 도구로의 활용 가능성도 기대 할 수 있다.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2007년도 학술대회 1부
• /
• pp.373-378
• /
• 2007

최근 들어 햅틱 분야는 디지털 콘텐츠를 만질 수 있게 촉감을 제공함으로써 의학, 교육, 군사, 엔터테인먼트, 방송 분야 등에서 널리 연구되고 있다. 그러나 햅틱 분야가 사용자에게 시청각 정보와 더불어 추가적인 촉감을 제공함으로써 보다 실감 있고 자연스러운 상호작용을 제공하는 등 여러 가지 장점을 가진 것에 비해 아직은 일반 사용자들에게 생소한 분야다. 그 이유 중 하나로 촉감 상호작용이 가능한 콘텐츠의 부재를 들 수 있다. 또한 최근에 가상환경(Virtual Environment, VR)에 관심이 증가 되고, 가상환경에 햅틱이라는 기술을 접목시키는 시도가 많이 일어나고 있어서, 촉감 모델링에 대한 욕구 또한 증대 되고 있다. 일반적으로 촉감 모델링은 Material properties를 가지고 있는 그래픽 모델들로 구성이 된다. 그래픽 모델링은 일반적인 모델링툴 (MAYA, 3D MAX, 기타 등)으로 할 수 있다. 하지만 촉감 관련된 촉감 모델들은 콘텐츠를 제작한 이후에 일일이 수작업으로 넣어 주어야 한다. 그래픽 모델링에서는 사용자가 직접 눈으로 확인 하면서 작업을 이루어 지기 때문에 직관적으로 이루어질 수 있다. 이와 비슷하게 촉감 모델링은 직관적인 모델링을 하기 위해서 사용자가 직접 촉감을 느껴 보면서 진행이 되어야 한다. 또한 그래픽 모델링과 촉감 모델링이 동시에 진행이 되지 않기 때문에 촉감 콘텐츠를 만드는데 시간이 많이 걸리게 되고 직관적이지 못하는 단점이 있다. 더 나아가서 이런 촉감 모델링을 포함한 모델링 높은 생산성을 위해서 신속히 이루어져야 한다. 이런 이유들 때문에 촉감 모델링을 위한 새로운 인터페이스가 필요하다. 본 논문에서는 촉감 상호작용이 가능한 촉감 콘텐츠를 직관적으로 생성하고 조작할 수 있게 하는 촉감 모델러를 기술한다. 촉감 모델러에서 사용자는 3 자유도 촉감 장치를 사용하여 3 차원의 콘텐츠 (정적 이거나 동적이거나 Deformation이 가능한 2D, 2.5D, 3D Scene)를 실시간으로 만져보면서 생성, 조작할 수 있는 촉감 사용자 인터페이스 (Haptic User Interface, HUI)를 통해서 콘텐츠의 표면 촉감 특성을 직관적으로 편집할 수 있다. 촉감 사용자인터페이스는 마우스로 조작하는 기존의 2 차원 그래픽 사용자 인터페이스를 포함하여 3 차원으로 사용자 인터페이스도 추가되어 있고 그 형태는 촉감 장치로 조작할 수 있는 버튼, 라디오버튼, 슬라이더, 조이스틱의 구성요소로 이루어져있다. 사용자는 각각의 구성요소를 조작하여 콘텐츠의 표면 촉감 특성 값을 바꾸고 촉감 사용자 인터페이스의 한 부분을 만져 그 촉감을 실시간으로 느껴봄으로써 직관적으로 특성 값을 정할 수 있다. 또한, XML 기반의 파일포맷을 제공함으로써 생성된 콘텐츠를 저장할 수 있고 저장된 콘텐츠를 불러오거나 다른 콘텐츠에 추가할 수 있다. 이러한 시스템은 햅틱이라는 분야를 잘 모르는 사람들도 직관적으로 촉감 모델링을 하는데 큰 도움을 줄 수 있을 것이다.