• 한국인터넷방송통신학회논문지
• /
• 제18권6호
• /
• pp.259-268
• /
• 2018

본 연구의 목적은 인지기능 훈련 콘텐츠들을 사용하는 동안 사용자들의 흥미와 몰입도를 높이기 위하여 인지 능력 수준에 맞춘 훈련 방법을 제시하는 것이다. 사용자의 인지 능력 수준은 K-means 알고리즘을 적용한 협업 필터링을 사용하여 사용자들의 정보와 한국형 아동 간이 정신 상태 검사 점수를 기반으로 군집화한 결과를 바탕으로 이루어졌다. 이 결과를 구현된 인지기능 훈련 통합 시스템에 적용하여 사용자의 인지 능력 수준에 알맞은 인지기능 훈련 영역 별 콘텐츠 순서와 난이도를 추천하였다. 특히 콘텐츠 난이도 조절은 사용자들이 긴장감과 편안함을 반복적으로 느낄 수 있도록 제안한 '몰입이론' 방법을 적용하여 높은 몰입감을 주고자 하였다. 결론적으로 본 논문에서 제안한 사용자 맞춤형 인지기능 훈련 방법은 기존의 치료사가 콘텐츠 순서와 난이도를 주관적으로 설정하는 것보다 더욱 효과적이고 재활 결과를 기대할 수 있을 것이다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제24권5호
• /
• pp.41-48
• /
• 2018

가상 환경에서 몰입감을 높이고 자유로운 상호작용을 제공하기 위한 가장 자연스러운 방법은 사용자의 손을 이용한 제스처 인터페이스를 제공하는 것이다. 그러나 손 제스처 인식에 관한 기존의 연구들은 특화된 센서나 장비를 요구하거나 낮은 인식률을 보이는 단점이 있다. 본 논문은 손 제스처 입력을 위한 RGB 카메라 이외 별도 센서나 장비 없이 손 제스처 인식이 가능한 3차원 DenseNet 합성곱 신경망 모델을 제안하고 이를 기반으로 한 가상현실 게임을 소개한다. 4개의 정적 손 제스처와 6개의 동적 손 제스처 인터페이스에 대해 실험한 결과 평균 50ms의 속도로 94.2%의 인식률을 보여 가상현실 게임의 실시간 사용자 인터페이스로 사용 가능함을 알 수 있었다. 본 연구의 결과는 게임 뿐 아니라 교육, 의료, 쇼핑 등 다양한 분야에서 손 제스처 인터페이스로 활용될 수 있다.

• 한국콘텐츠학회논문지
• /
• 제19권6호
• /
• pp.481-490
• /
• 2019

본 연구의 목적은 뉴미디어의 특성을 이해하기 위해 활용되는 상호작용성 개념의 폭넓은 함의를 인지하고 그것을 구체화시키는 것이다. 이미 제안된 여러 상호작용성의 유형들을 참고하여 우연적인 상호작용성(contingent interactivity)을 고려하였다. 우연성이란 수행이나 선택이 필연적이거나 확정적인 것으로 간주할 수 없는 상태를 말하며, 또한 주체의 활동이 다양하게 이루어질 수 있는 잠재성을 말한다. 이러한 관점에서 우연적 상호작용이란 메시지나 콘텐츠를 대하는 사용자들의 관여가 필연적인 것이 아니고 실험적이거나 창의적인 경우를 말한다. 상호작용은 콘텐츠의 완성이나 특정한 현실의 몰입을 지향하지 않는다. 오히려 우연적 수행의 결과는 최종적 콘텐츠가 아니며 또 다른 사용자들의 상호작용을 유도하는 특성을 지닌다. 본 연구는 이렇게 개념화된 우연적 상호작용성의 의미를 영화 리컷과 게임 모딩의 두 가지 사례로 고찰하였다. 두 가지 경우 모두 상호작용을 행하는 주체가 우연적인 상황에 놓여있으며, 아울러 리컷이나 모딩을 통해 개별적인 콘텐츠들이 지속적으로 창출되도록 한다는 점을 이해할 수 있다.

• 한국차세대컴퓨팅학회논문지
• /
• 제14권6호
• /
• pp.66-74
• /
• 2018

최근 가상환경에서 몰입감을 늘리고 자유로운 상호작용을 제공하기 위한 손 제스처 인식에 대한 연구가 활발히 진행되고 있다. 그러나 기존의 연구는 특화된 센서나 장비를 요구하거나, 낮은 인식률을 보이고 있다. 본 논문은 정적 손 제스처와 동적 손 제스처 인식을 위해 카메라 이외의 별도의 센서나 장비 없이 딥러닝 기술을 사용한 손 제스처 인식 방법을 제안한다. 일련의 손 제스처 영상을 고주파 영상으로 변환한 후 손 제스처 RGB 영상들과 이에 대한 고주파 영상들 각각에 대해 덴스넷 3차원 합성곱 신경망을 통해 학습한다. 6개의 정적 손 제스처와 9개의 동적 손 제스처 인터페이스에 대해 실험한 결과 기존 덴스넷에 비해 4.6%의 성능이 향상된 평균 92.6%의 인식률을 보였다. 본 연구결과를 검증하기 위하여 3D 디펜스 게임을 구현한 결과 평균 34ms로 제스처 인식이 가능하여 가상현실 응용의 실시간 사용자 인터페이스로 사용가능함을 알 수 있었다.

• 한국정보통신학회논문지
• /
• 제26권11호
• /
• pp.1653-1659
• /
• 2022

가상현실 콘텐츠는 HMD기기를 이용하여 사용자에게 높은 몰입감을 제공한다. 그러나 HMD기기의 착용 중에는 사용자의 위치나 장애물과의 거리를 파악하기 어렵기 때문에 물리적 충돌로 인해 상처를 입는 경우가 발생한다. 본 논문에서는 HMD기기의 착용 중에 장애물과의 충돌 위험을 알려 사고를 방지하는 알리미 모듈을 제안한다. 제안하는 모듈은 가속도·자이로 센서로 사용자의 상태를 입력받아 충돌 사고 가능성이 있는 동작을 판별한다. 충돌 예상 범위에 장애물이 있다면 사용자에게 부저로 경고음을 출력한다. 실험 결과, HMD 착용 상태에서 장애물 감지 정확도가 1단계에서 86.6%, 2단계 상황에서 83.3%로 도출되어 사고 방지 알리미의 성능을 확인할 수 있었다.

• 한국인터넷방송통신학회논문지
• /
• 제23권5호
• /
• pp.191-197
• /
• 2023

모바일 슈팅 게임은 PC 게임이 그대로 옮겨진 대표적인 사례이다. 현재 대부분의 모바일 슈팅 게임에서 PC 게임에 사용되었던 조이스틱과 같은 UI가 터치버튼으로 옮겨졌지만, 모바일 장치의 디스플레이가 작기 때문에 사용자의 손가락이 게임 스크린을 가리는 불편함이 그대로 나타나고 있다. 본 논문은 모바일 슈팅 게임에 있어, 작은 디스플레이의 한계를 극복하고 게임의 몰입감을 높이기 위해, 캐릭터 이동과 조준을 통합한 UI와 디스플레이 회전, 흔들기, 진동 등의 직관적 UI를 도입한다. 또한 라운드마다 지난 경기를 분석하여 캐릭터의 부족한 능력을 파악하고 능력을 보충할 시너지를 추천하여 게임의 재미를 더한다. 본 논문은 이러한 기능을 가진 모바일 슈팅 게임을 안드로이드 스마트폰에서 실제로 설계하고 구현하여 논문에서 제시한 목적들이 성취됨을 증명하였다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제21권3호
• /
• pp.1-10
• /
• 2015

최근 각광받고 있는 몰입감 있는 콘텐츠 소비 공간을 효율적으로 구축하기 위해서 전방 프로젝션 시스템이 많이 사용되고 있다. 하지만 전방 프로젝션 환경에서는 프로젝터와 투사면 사이에 사용자가 위치할 경우 그림자가 투사면 위에 나타나 중요한 정보를 가리거나 사용자의 몰입감을 저해한다. 이러한 이유로 전방 프로젝션 환경에서 그림자를 지우고자 하는 시도가 이전부터 있었다. 전방 프로젝션 환경에서 그림자를 지우는 방법은 생성된 그림자 영역을 다른 각도의 프로젝터를 이용하여 빛을 보정해주는 방식을 사용한다. 이 과정에서 그림자 영역을유추할때 정확도만을 추구하는 방법은 연산시간이 너무 오래 걸리게 되고, 단순하게 유추하는 방법은 불필요한 영역까지도 그림자 영역으로 유추하는단점이 존재한다. 따라서 본 논문에서는 깊이 카메라에서 획득할수 있는 스켈레톤 정보를 이용하여 계산량은 적지만 사용자가 생성해내는 그림자에 가까운 모양을유추하여 효과적으로 그림자를 지워주는 방법을 제안한다. 또한 사용자가 움직일때 생성되는 그림자의 잔상이 남지 않도록 디스턴스 필드(distance field)를 이용한 마스크 생성 방법을 제안한다.

• 한국멀티미디어학회논문지
• /
• 제23권8호
• /
• pp.1075-1087
• /
• 2020

Aviation ICT technology is a convergence technology between aviation and electronics, and has a wide variety of applications, including navigation and education. Among them, in the field of aerial pilot training, there are many problems such as the possibility of accidents during training and the lack of coping skills for various situations. This raises the need for a simulated pilot training system similar to actual training. In this paper, pilot training data were collected in pilot training system using VR/AR to increase immersion in flight training, and Customized Pilot Training Platform with Collaborative Deep Learning in VR/AR Environment that can recommend effective training courses to pilots is proposed. To verify the accuracy of the recommendation, the performance of the proposed collaborative deep learning algorithm with the existing recommendation algorithm was evaluated, and the flight test score was measured based on the pilot's training data base, and the deviations of each result were compared. The proposed service platform can expect more reliable recommendation results than previous studies, and the user survey for verification showed high satisfaction.

• 한국융합학회논문지
• /
• 제7권1호
• /
• pp.25-30
• /
• 2016

가상현실의 기술에 있어서는 미국을 필두로 한 독식형 시장 그리고 유니버셜 등의 가상현실 아이템들이 증가하고 있는 추세이다. 다인칭의 사용자가 시각, 촉각, 청각, 운동감 등 온 몸으로 직접 체험을 하며 콘텐츠에 깊게 빠져들어 즐길 수 있는 새로운 형태의 콘텐츠 플랫폼을 개발해야 하며 관람객이 수동적으로 콘텐츠를 즐기는 것이 아니라 능동적으로 콘텐츠에 직접 참여하여 몰입도를 극대화 시킬 수 있는 콘텐츠 개발을 해야 한다. 이를 위해 $360^{\circ}$서클비전, 입체영상, 인터렉션, 시뮬레이터, 환경 Effect 등의 모든 요소가 혼합된 새로운 형태의 5D 가상현실 어트렉션 콘텐츠의 개발이 필요하며 이를 위한 색상 및 밝기 보정 기술 방법들을 제안하고자 한다.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제14권4호
• /
• pp.1673-1688
• /
• 2020

This paper presents a new method for improving teaching aids with the design and development of a chemistry education platform - the Mixed Reality (MR) Chemistry Lab. Our system provides a new educational experience in which students can simulate a chemistry experiment in a virtual lab and interact with objects using Oculus Helmet-Mounted Displays (HMD) and hand controller devices. The proposed system aims to familiarize students with experimental procedures and safety knowledge before conducting actual experiments. Moreover, students will be able to observe microscopic atomic structure models in three dimensions. Our research also includes a five-part, quantitative evaluation system user tests perform using a quantitative questionnaire consisting of five items, including hardware equipment, immersion, education, interaction sense of control, and degree of difficulty. The evaluation results confirm that this system will be helpful to the educational experience of conducting chemistry experiments with scientific evaluation methods, and the proposed system is also expected to have a broad range of applications in many other subjects.