• Journal of the Korea Computer Graphics Society
• /
• v.24 no.5
• /
• pp.41-48
• /
• 2018

The most natural way to increase immersion and provide free interaction in a virtual environment is to provide a gesture interface using the user's hand. However, most studies about hand gesture recognition require specialized sensors or equipment, or show low recognition rates. This paper proposes a three-dimensional DenseNet Convolutional Neural Network that enables recognition of hand gestures with no sensors or equipment other than an RGB camera for hand gesture input and introduces a virtual reality game based on it. Experimental results on 4 static hand gestures and 6 dynamic hand gestures showed that they could be used as real-time user interfaces for virtual reality games with an average recognition rate of 94.2% at 50ms. Results of this research can be used as a hand gesture interface not only for games but also for education, medicine, and shopping.

• Journal of the HCI Society of Korea
• /
• v.14 no.2
• /
• pp.13-20
• /
• 2019

For encountered haptic display systems among the virtual training systems for industrial safety, visual-haptic co-location is required for natural interaction between virtual and real objects. In this paper, we performed the user evaluation of the immersive VR haptic system which implement some level of visual-haptic co-location through a careful and accurate calibration method. The goal of the evaluation is to show that user performance (reaction time and distance accuracy) for both environments is not significantly different for certain tasks performed. The user evaluation results show statistically significant differences in reaction time but the absolute difference is less than 1 second. In the meantime, the distance accuracy shows no difference between the virtual and the actual environments. Therefore, it can be concluded that the developed haptic virtual training system can provide inexpensive industrial safety training in place of costly actual environment.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2019.05a
• /
• pp.576-578
• /
• 2019

VIRTUAL REALITY is a technology that enables users to experience environments that are difficult to experience, such as games, medical care, defense, and manufacturing industries. In this study, we propose the development of contents that can utilize the virtual reality technology to taste the destinations to travel in advance and to select the places to travel. Generally, when you decide on a destination, use the website or booklet to search for information about the destination. In recent years, applications that recommend travel destinations have also been developed and utilized. However, if information about travel destinations is implemented as a virtual reality, it will be possible to obtain more reliable and realistic information. Like Google Maps VR, you can show the globe as a whole, zoom in or out, and click on a keyword to recommend a tourist destination that matches the keyword. It uses internet browsing cookies to automatically display tourist attractions according to user's interest.

• Smart Media Journal
• /
• v.5 no.3
• /
• pp.62-66
• /
• 2016

The recent increase in virtual reality (VR) technology around the world has been VR work in cooperation with technology from other sectors to form new trends. In the case of advertising, it is difficult to trace if VR users viewed a certain piece of advertisement because the current technology does not allow them to interact with the screen. Eye tracking technology can act as a solution to the problem of tracing advertisement views as it allows for data extraction in relation to which advertisements were viewed and for how long. The research paper suggests a method of how to track the eyes of users in VR advertising. The suggested method includes communication between a server and VR HMD (virtual reality head mounted display) as well as a screen of output from the server.

• The Journal of the Korea Contents Association
• /
• v.20 no.12
• /
• pp.230-240
• /
• 2020

To develop a virtual world-based immersive tutoring system, we would like to develop a simulation in the spatial aspect to maximize the diversity and realism of the situation. This implementation requires the modeling of virtual space as well as the knowledge and intelligent thinking functions of virtual humans. First, information structures are needed to simulate the hierarchical and multifaceted composition of space and the corresponding knowledge of virtual humans. Specifically, four structures for 2.5D spatial distribution expression, complex spatial relationship expression, object expression, and temporal and spatial representation of events are developed respectively. It then uses these expressed knowledge to develop the spatial thinking function of virtual humans needed to make spatial movement. In general, events have a chain effect on adjacent or connected objects through force, resulting in a variety of situations and reflected in the planning of the next action by the virtual humans involved. For this purpose, the development of events according to historical trends is recorded on the representation structure of time and space. It embodies typical events to demonstrate the feasibility of independent behavior in complex spaces among virtual people.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.1149-1154
• /
• 2006

증강현실 (AR: Augmented Reality)은 카메라를 통하여 현실의 공간에 가상의 물체를 삽입하는 기술로 사용자에게 컴퓨터상에서 정보를 보강해 줌으로서 사용자가 카메라로 보이는 환경에 대한 추가적인 정보를 취득 할 수 있게 해주는 분야이다. 가상환경(Virtual Reality) 및 혼합영상(Mixed Reality)을 이용해 보다 사실감 있는 가상의 영상을 일상 생활에 접목하려는 기술들이 부각되며 활발한 연구가 이루어 지고 있는데 이러한 시도는 일상생활의 다양한 분야에 적용이 되고 있다. 본 논문에서는 카메라로 취득된 화면상에 사용자의 움직임, 즉 사용자가 대상되는 마커를 삽입하고 컨트롤할 수 있는 음악플레이어를 구현한다. 사용자가 키보드나 마우스 등의 입력장치가 아닌 카메라에서 보여지는 마커의 움직임으로 원하는 음악을 플레이 할 수 있는 방법을 제안하고자 한다. 실시간으로 입력되는 카메라상의 프레임에서 대상되는 마커의 움직임을 찾고 그 대상물체 위에 정보를 증강시켜주고, 그 음악을 화면상에 사용자의 마커 움직임을 통해서 제어하는 방법이다.

• 한국HCI학회:학술대회논문집
• /
• 2006.02b
• /
• pp.810-814
• /
• 2006

그 동안 개발된 시뮬레이터들은 주로 단안 정보에 기초한 것들이 대부분이었고, 양안 정보를 제공하더라도 사용자의 움직임을 반영하지 못하였다. 양안정보를 제공하지 못하는 시뮬레이터는 게임으로써는 재미에 한계가 있고, 훈련 도구로써 실제 수행에 도움을 주기 어렵다. 본 연구는 사용자의 움직임을 고려한 양안 정보를 제공하는 외야수 뜬 공 잡기 가상 현실 시뮬레이터를 개발하여 이러한 문제점들을 해결할 수 있는 토대를 마련하였다. 그리고 양안 정보 제공의 중요성과 개발된 시뮬레이터의 타당성 및 유용성을 검증하기 위해 본 시뮬레이터를 이용하여 공의 위치 판단 과제를 실시하였다. 양안 시차가 주어진 조건과 주어지지 않은 조건 각각에 두 집단 구성원들을 무선적으로 배치하여 정답률과 반응 시간을 측정하였다. 숙련자들은 양안시차가 주어진 조건에서 더 좋은 수행을 보인 반면, 일반인들은 양안시차가 주어지지 않은 조건에서 더 좋은 수행을 보였다. 이는 뜬 공 잡기 상황에서 양안정보가 숙련자들에게는 유용하지만 비숙련자들에게는 그렇지 않았음을 보여준다. 또한 숙련자들이 정답률과 반응 시간 모두에서 일반인들보다 더 좋은 수행을 보였고 이는 통계적으로 유의미하였다. 이와 같은 가상 현실 시뮬레이터는 양안 정보를 제공함으로써 이전의 시뮬레이터들보다 게임이나 훈련 도구로 사용함에 있어 더 효과적이다. 또한 인간의 운동 수행에 관련된 연구를 하는데 유용하게 사용될 수 있다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2009.11a
• /
• pp.219-222
• /
• 2009

자유시점 비디오는 단순히 수동적으로 비디오를 보는 것이 아니라 원하는 시점을 자유로이 선택하여 보는 능동형 비디오이다. 일반적으로 다양한 위치 및 다양한 각도에 위치하는 다수의 카메라로부터 촬영된 영상을 이용하여 제작하는데, 이 기술은 박물관 투어, 엔터테인먼트 등의 다양한 분야에서 활용된다. 본 논문에서는 자유시점 비디오의 새로운 분야로 한 장의 영상을 가상 카메라와 깊이맵을 이용하여 영상 내부를 네비게이션하는 자유시점 입체 Tour-Into-Picture (TIP)을 제안한다. 오래전부터 TIP가 연구되어 왔는데, 이 분야는 한 장의 사진 내부를 탐험하면서 애니메이션으로 볼 수 있게 하는 기술이다. 제안 방법은 전처리과정으로 전경 마스크, 배경영상, 및 깊이맵을 자동 및 수동 방법으로 구한다. 다음에는 영상 내부를 항해하면서 투영 영상들을 획득한다. 배경영상과 전객객체의 3D 모델링 데이터를 기반으로 가상 카메라의 3차원 공간 이동, yaw, pitch, rolling의 회전, look-around effect, 줌인 등의 다양한 카메라 기능을 활용하여 자유시점 비디오를 구현한다. 또한 깊이정보의 특성 및 구조에 따라 놀라운 시청효과를 전달하는 카메라 기능의 설정 방법을 소개한다. 소프트웨어는 OpenGL 및 MFC Visual C++ 기반으로 구축되었으며, 실험영상으로 조선시대의 작품인 신윤복의 단오풍정을 사용하였고, 입체 애니메이션으로 제작되어 보다 실감있는 콘텐츠를 제공한다.

• Cartoon and Animation Studies
• /
• s.48
• /
• pp.117-139
• /
• 2017

The possibility of interactivity of digital media environment is adopted in human expression system and integrates the dynamic aspect of digital technology with expressive structure, thereby transforming the paradigm of image acceptance as well as image expression range. Virtual reality images have an important meaning in that they are changing the one-way mechanism of production and acceptance of images that lead to producers-video-audiences beyond the problem of verisimilitude such as how vividly they simulate reality. First of all, the virtual reality image is not one-sided but interactive image composed by the user. Viewing a virtual reality image does not just see the camera shine, but it gets the same view as in the real world. Therefore, the image that was controlled through framing changes to be configured positively by the user. This implies a change in the paradigm of image acceptance as well as a change in the existing form of the image itself. In addition, the narrative structure of the image and the subjects that are formed in the process are also required to be discussed. In the virtual reality image, the user 's gaze is a fusion of the gaze inside the image and the gaze outside the image. This is because the position of the user as the subject of the gaze in the virtual reality image is continuously restricted by the device of the discourse such as the editing and the narration of the shot. The significance of the virtual reality image is not aesthetically perfect but it is reconstructed according to the user to reflect the existence of the user positively and engage the user in the image.

• Proceedings of the Korean Information Science Society Conference
• /
• 2002.04a
• /
• pp.745-747
• /
• 2002

본 논문에서는 가상환경을 위한 3차원 협동 저작도구를 제안한다. 이 시스템은 Client-Server 구조로서 Java분산 어플리케이션 모델인 3-tier 모델을 이용하였고, 3차원 장면 표면을 위해 자료구조는 Java 3D의 Scene Graph를 이용한다. 그리고 작업자의 역할 구분과 Client에서 공동작업물의 저장 기능을 부여하고 공동 작업의 결과를 Client에게 선택적으로 보여지게 함으로써 Client-Server 구조와 pessimistic Locking의 단점을 보완한다.