• 한국게임학회 논문지
• /
• 제21권5호
• /
• pp.41-48
• /
• 2021

본 논문은 2개의 포즈(위치 및 회전) 추적 센서를 사용하여 마네킹 모델위에 3차원의 가상 인체를 증강하는 모바일 증강 가시화 기술에 대해서 소개한다. 증강 가시화를 위해 사용된 종래의 카메라 트래킹 기술은 카메라 영상을 사용하기 때문에 카메라의 떨림이나 빠른 이동시 카메라의 포즈 계산에 실패하는 단점이 있으나, 바이브 트래커를 이용하게 되면 이러한 단점을 극복할 수 있다. 또한 증강하고자 하는 객체인 마네킹의 위치가 바뀌거나 회전을 하게 되더라도 마네킹에 부착된 포즈 추적 센서를 사용하여 증강 가시화가 가능한 장점이 있으며 무엇보다 카메라 트래킹을 위한 부하가 없다는 장점을 가진다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제29권5호
• /
• pp.11-20
• /
• 2023

본 논문에서는 손 동작을 포함한 전신 동작 생성이 가능하고 동작 생성 딜레이를 조절할 수 있는 새로운 딥러닝 기반 동작 복원 기술을 제안한다. 제안된 방법은 범용적으로 사용되는 센서인 바이브 트래커와 딥러닝 기술의 융합을 통해 더욱 정교한 동작 복원을 가능하게함과 동시에 IK 솔버(Inverse Kinematics solver)를 활용하여 발 미끄러짐 현상을 효과적으로 완화한다. 본 논문은 학습된 오토인코더(AutoEncoder)를 사용하여 트래커 데이터에 적절한 캐릭터 동작의 실시간 복원이 가능하고, 동작 복원 딜레이를 조절할 수 있는 방법을 제안한다. 복원된 전신 동작에 적합한 손 동작을 생성하기 위해 FCN(Fully Connected Network)을 사용하여 손 동작을 생성하고, 오토인코더에서 복원된 전신 동작과 FCN 에서 생성된 손 동작을 합쳐 손 동작이 포함된 캐릭터의 전신 동작을 생성할 수 있다. 앞서 딥러닝 기반의 방법으로 생성된 동작에서 발 미끄러짐 현상을 완화시키기 위해 본 논문에서는 IK 솔버 를 활용한다. 캐릭터의 발에 위치한 트래커를 IK 솔버의 엔드이펙터(end-effector)로 설정하여 캐릭터의 발 움직임을 정확하게 제어하고 보정하는 기술을 제안함으로써, 생성된 동작의 전반적인 정확성을 향상시켜 고품질의 동작을 생성한다. 실험을 통해, 본 논문에서 제안한 딥러닝 기반 동작 복원에서 정확한 동작 생성과 사용자 입력에 따라 프레임 딜레이 조정이 가능함을 검증하였고, 생성된 전신 동작의 발미끄러짐 현상에 대해 IK 솔버가 적용되기 이전 전신 동작과 비교하여 보정에 대한 성능을 확인하였다.

• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2021년도 제64차 하계학술대회논문집 29권2호
• /
• pp.517-518
• /
• 2021

본 논문에서는 게임 개발 플랫폼인 언리얼 엔진 4을 사용하여 가상현실기술을 활용한 복싱 게임을 개발하였다. 복싱 게임을 더욱 실감나게 즐길 수 있도록 하기 위해 양 손에 부착한 VIVE 트래커로 복싱 동작을 모션 트래킹하여 아바타를 제어하였다. 게임 모드의 경우 연습모드와 스파링모드로 구성하였다. 연습모드에서 튜토리얼을 진행하여 게임플레이를 익힌 후 스파링모드에서 AI와 복싱 대결을 하도록 구현하였다. 스파링모드는 AI와 플레이어가 대결을 하며 먼저 체력을 소모시키면 승리하게 된다. 그리고 AI 캐릭터의 애니메이션 재생 속도에 따라 4가지 난이도를 설정할 수 있다. 가상현실 복싱게임은 VR기술을 이용하여 가정에서 간편하게 복싱 운동을 즐길 수 있으며, 더 많은 VIVE 트래커를 활용하면 정밀한 모션 트래킹이 가능하여 현실감을 높일 수 있다.

• 한국정보전자통신기술학회논문지
• /
• 제16권5호
• /
• pp.247-255
• /
• 2023

메타버스 내의 가상현실 공간 형성을 위해서는 정확한 트래킹 센서와 구현이 필요하다. 대부분 국가 기관 및 기업들은 바이브와 같은 자체 트래킹 센서와 베이스 스테이션을 사용하여 트래킹을 수행한다. 바이브 방식은 공간적 제약, 주변에 장애물이나 구조물이 있을 경우 트래킹에 문제가 발생할 수 있고, 공간 내에서 수용 가능한 인원도 제한된다. 본 논문에서는 공간 가상현실 메타버스를 자유롭게 트래킹 할 수 있도록 IR센서 트래킹 시스템을 이용하여 메타버스를 구성하고, 필요에 따라 바닥과 천장에 IR센서를 추가 배치하여 메타버스 공간을 유연하게 구성하여 컨텐츠를 실험하였다. 실험한 결과 바이브 방식에 비해 IR-트래킹 시스템 방식이 바이브 방식보다 약 12% 정도 추적 안정성이 높았다. 또한 바닥추적 센서를 더 추가면 추적 안정성이 더 높아 안정적으로 가상공간을 표현할 수 있다.

• 반도체디스플레이기술학회지
• /
• 제18권4호
• /
• pp.116-119
• /
• 2019

User interface/experience and realistic game manipulation play an important role in virtual reality first-person-shooting game. This paper presents an intuitive hands-free interface of gaming interaction scheme for FPS based on user's gesture recognition and VR controller. We focus on conventional interface of VR FPS interaction, and design the player interaction wearing head mounted display with two motion controllers; leap motion to handle low-level physics interaction and VIVE tracker to control movement of the player joints in the VR world. The FPS prototype system shows that the design interface helps to enjoy playing immersive FPS and gives players a new gaming experience.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2021년도 추계학술발표대회
• /
• pp.19-22
• /
• 2021

본 논문은 군과 경찰 등에서 수행하는 시뮬레이션 사격 훈련 중 스크린 사격과 VR 사격이 혼합된 복합 훈련 환경에서 사용할 수 있는 일체형 시뮬레이션 사격 서비스에 대해 연구하였다. 이 서비스는 스크린과 HMD에 투사되는 목표물에 대해 사격 훈련이 가능하도록 설계한 서비스로 하나의 가상공간에서 사용할 경우 스크린을 이용한 개인 사격 훈련과 VR을 이용한 팀 사격 훈련이 동시에 가능하다. 일체형 시뮬레이션 총기의 총구에 비가시 적외선 레이저 모듈을 장착하여 스크린 사격이 가능하도록 하고, 총열 상단에 HTC Vive Tracker를 장착하여 VR 사격에서 훈련자의 자세 및 위치를 인식하게 한다. 총열 하단에는 사용자의 행동을 제어하는 손잡이 형태의 인터페이스 모듈을 장착한다. 비가시 적외선 레이저 모듈과 인터페이스 모듈에서 발생한 신호는 일체형 시뮬레이션 총기의 총열에 장착한 무선 통신 모듈에 의해 블루투스 방식으로 통합 제어 장치로 전달되어 처리함으로써 혼합 환경에서 사용이 가능하다. 스크린 사격과 VR 사격이 동시에 가능한 혼합 환경에서 시험한 결과 운용이 가능한 것을 확인하였다. 일체형 시뮬레이션 사격 서비스는 기존 사람 중심의 훈련 서비스에서 자동차 또는 함정 등과 같은 조종 훈련 플랫폼과 연동하여 운용할 수 있는 기술 발전이 필요하다.