• 한국멀티미디어학회논문지
• /
• 제19권10호
• /
• pp.1759-1766
• /
• 2016

We can implement the virtual touch recognition system by mounting the virtual touch algorithm into an embedded device connected to a depth camera. Since the computing performance is limited in embedded system, the real-time processing of recognizing the virtual touch is difficult when the resolution of the depth image is large. In order to resolve the problem, this paper improves the algorithms of binarization and labeling that occupy a lot of time in all processing of virtual touch recognition. It processes the binarization and labeling in only necessary regions rather than all of the picture. By appling the proposed algorithm, the system can recognize the virtual touch in real-time as about 31ms per a frame in the depth image that has 640×480 resolution.

• 한국컴퓨터정보학회논문지
• /
• 제24권4호
• /
• pp.57-63
• /
• 2019

In this paper, we propose a new framework to control VR(Virtual reality) contents in real time using user's mouth-wind and acceleration sensor of mobile device. In VR, user interaction technology is important, but various user interface methods is still lacking. Most of the interaction technologies are hand touch screen touch or motion recognition. We propose a new interface technology that can interact with VR contents in real time using user's mouth-wind method with acceleration sensor. The direction of the mouth-wind is determined using the angle and position between the user and the mobile device, and the control position is adjusted using the acceleration sensor of the mobile device. Noise included in the size of the mouth wind is refined using a simple average filter. In order to demonstrate the superiority of the proposed technology, we show the result of interacting with contents in game and simulation in real time by applying control position and mouth-wind external force to the game.

• 대한전기학회:학술대회논문집
• /
• 대한전기학회 2003년도 하계학술대회 논문집 D
• /
• pp.2265-2267
• /
• 2003

In this paper, the virtual reality system is tried to developed, which controls not only the sense of sight and hearing but also the sense of touch, In order to develope the sense of touch in this study, the stable tactual transaction system, based on summing up the basic algorithm and theory is embodied. Especially, the graphic deformation algorithm is developed in realtime with using the deformed FEM. To apply the FEM, a deformed material model is produced and then the graphic deformation with this model is able to force. Finally, the graphic transaction algorithm is deduced by the realtime calculation and simplification because the purpose of this system is to transact in real time. The result of this study is that the proposed system is possible to deform the graphics and transact the haptic in real time in PC. The simulation program has been made to prove this result.

• 전기학회논문지P
• /
• 제52권3호
• /
• pp.121-126
• /
• 2003

In this paper, we propose the haptic system for the real-time virtual environment-control, which controls the sense of sight, hearing and touch. In order to maintain the stable haptic system in this study, we apply the proxy force rendering algorithm and the real-time graphic deformation algorithm based on the FEM. The applied proxy algorithm makes the system possible to be more stable and prompt with a virtual object. Moreover, the haptic rendering algorithm is applied to work out a problem that the tactual transaction-period is different from the graphic transaction- period. The graphic deformation algorithm is developed in the real-time using the deformed FEM. To apply the FEM, a deformed material-model is produced and then the graphic deformation with this model is able to force. Consequently, the graphic rendering algorithm is deduced by the real-time calculation and simplification because the purpose of this system is to transact in the real time. Applying this system to the PC, we prove that it is possible to deform the graphics and transact the haptic. Finally we suggest the variable simulation program to show the efficiency of this system.

• 한국컴퓨터그래픽스학회논문지
• /
• 제24권4호
• /
• pp.21-27
• /
• 2018

본 논문은 모바일 디바이스에서 사용자의 입 바람을 통해 실시간으로 인터랙션 할 수 있는 기법을 제시한다. 모바일과 가상현실 분야에서 사용자의 인터랙션 기술이 중요함에도 불구하고 여전히 사용자 인터페이스 기술의 다양성이 부족하며 대부분 손을 이용한 스크린의 터치나 동작 인식이다. 본 연구에서는 사용자의 입 바람을 이용하여 실시간으로 상호작용할 수 있는 새로운 인터페이스 기술을 제안한다. 사용자와 모바일 디바이스 간의 각도와 위치를 이용하여 바람의 방향을 결정하며 사용자의 입 바람과 가중치 함수를 기반으로 바람의 크기를 계산한다. 제안하는 기술의 우수성을 보여주기 위해 입 바람 외력을 유체 방정식에 적용하여 실시간으로 벡터장의 흐름을 시각화하는 결과를 보여준다. 우리는 제안하는 방법의 결과를 모바일 디바이스 환경에서 보여주지만 인터페이스 기술을 요구하는 가상현실과 증강현실 분야에 응용할 수 있다.

• 한국콘텐츠학회논문지
• /
• 제10권8호
• /
• pp.461-471
• /
• 2010

최근, 현실세계와 가상세계를 결합하여 디지털 컨텐츠 형태로 보여주는 증강 현실 기술이 등장하고 있다. 증강현실 기술의 효과를 극대화하기 위해서, 사용자가 현실세계의 사물을 조작하는 것과 유사한 방법으로 디지털 콘텐츠와 상호작용하는 것을 가능하게 해 주는 실감형 인터페이스가 적용된다. 특히, 교육 분야에서는 이러한 기술들이 학습자의 흥미와 몰입도를 높이고, 학습 효과를 극대화할 수 있는 새로운 학습 콘텐츠의 제작을 가능하게 할 것으로 기대되고 있다. 본 논문에서는 멀티 터치스크린과 실감형 인터페이스를 적용한 과학 실험 학습 시스템을 제안한다. 이 시스템은 종래의 실험대 위에서 이루어지는 실험도구의 조작을 대체하기 위하여 대형 멀티 터치스크린을 장착한 실험 테이블과 간단한 사용자의 제스쳐를 인식할 수 있는 실감형 학습 디바이스를 사용한다. 실제 과학 실험에서는 높은 비용이나 긴 시간, 또는 위험 물질들이 요구되기도 하는데, 본 시스템은 이러한 요인들을 극복하면서 학습자들에게 다양한 실험을 현실감 있게 제공할 수 있다.

• 정보통신설비학회논문지
• /
• 제10권4호
• /
• pp.143-147
• /
• 2011

The system using augmented reality can save the time and cost. It is verified in various fields under the possibility of a technology by solving unrealistic feeling in the virtual space. Therefore, augmented reality has a variety of the potential to be used. Generally, multimodal senses such as visual/auditory/tactile feed back are well known as a method for enhancing the immersion in case of interaction with virtual object. By adapting tangible object we can provide touch sensation to users. a 3D model of the same scale overlays the whole area of the tangible object; thus, the marker area is invisible. This contributes to enhancing immersive and natural images to users. Finally, multimodal feedback also creates better immersion. In this paper, sound feedback is considered. By further improving immersion learning augmented reality for children with the initial step learning content is presented. Augmented reality is in the intermediate stages between future world and real world as well as its adaptability is estimated more than virtual reality.

• 한국컴퓨터산업학회논문지
• /
• 제5권2호
• /
• pp.217-226
• /
• 2004

본 논문에서는 초음파 모터 구동형 역감 장치의 말단에 전기 자극 촉각 장치를 부착함으로써 역감과 촉감을 동시에 제시할 수 있는 단일 PC 기반의 역감-촉감 제시 시스템을 제안한다 인간이 가상 현실 공간에서 가상 물체와 접촉했을 때 동시에 역감과 촉감 정보를 제시받으면 역감 또는 촉감의 한가지 감각만을 제시받은 것 보다 더 큰 몰입감을 느끼게 된다. 또한 다양한 가상 물체를 복잡한 알고리즘 없이 쉽게 표현 또는 인식할 수 있다. 예를 들자면, 사용자가 역감장치를 사용하면 딱딱한 가상 벽과 탄성이 높은 고무공에 대한 차이점을 확실하게 구별할 수는 있으나, 송곳과 같은 날카로운 가상 물체의 경우에는 단지 딱딱함만을 제시하여 가상 벽과의 구별하기가 매우 어렵다 만약 전기 자극형 촉감장치(The Electric Stimulus Tactile Apparatus System : TESTAS)를 함께 사용한다면 딱딱함과 동시에 송곳에 찔렸을 때의 촉감을 함께 제시할 수 있어 가상 벽과의 차이점을 확실하게 구별할 수 있다.

• 디지털콘텐츠학회 논문지
• /
• 제18권1호
• /
• pp.1-7
• /
• 2017

요즘은 다향한 IT 기술의 융합을 통해 구현되는 가상현실 기술은 사용자의 체험영역을 확대하고 물리적인 에너지와 각종 비용을 절감하는 기술로 주목을 받고 있다. 본 연구에서는 가상현실 기술을 활용한 가상훈련시스템의 몰입감과 상호작용 제공을 통한 학습효과가 높은 분야를 대상으로 연구하고자 한다. 가상현실 시스템의 국내외 현황에 대해 알아보고 국내 가상훈련 시스템의 수요를 분석하여 나아가야 할 발전 방향에 대해서 연구하고자 한다. 가상현실 기기들의 사용현황에 대해서 가상훈련수요를 고려한 사업의 로드맵을 구축하고자 한다.

• 한국지능시스템학회논문지
• /
• 제15권2호
• /
• pp.173-178
• /
• 2005

본 논문은 보다 편리한 가정 생활환경 구축을 목적으로 한 가상대화시스템 구현에 관한 연구이다. 이를 실현하기 위하여 본 논문은 음성인식, 음성합성, 비디오 신호 및 센서신호처리 등의 멀티미디어 신호처리에 그 기술적 기반을 두고 있다. 대화시스템의 중요한 모듈로서의 음성합성기, HM-Net(Hidden Markov Network)에 기반한 실시간 음성인식기, 픽셀의 밝기차를 이용한 실시간 움직임 검출 및 터치센서 등을 대화시스템에 통합함으로써 이루어진다. 실제 구동 실험에서 주위 노이즈 환경의 영향으로 시뮬레이션 결과보다는 성능이 떨어지나, 소파에 앉아있는 동안 자동되는 시스템의 실험 평가에서 가전제품 능의 컨트롤이 비교적 사용하기 쉬웠다는 결과를 얻었다.