• 한국컴퓨터그래픽스학회논문지
• /
• 제25권1호
• /
• pp.23-32
• /
• 2019

사이버 멀미는 VR 체험 중 발생하는 증상으로, 주로 감각과 인지 시스템 사이의 불일치로 인해 발생하는 것으로 추정된다. 하지만 감각 및 인지 시스템을 객관적으로 측정할 수 있는 방법이 없기 때문에, 사이버 멀미를 측정하는 것은 어렵다. 이를 해결하기 위해 사이버 멀미를 측정하기 위해 다양한 방법론들이 연구되고 있다. 기존의 멀미를 측정하기 위한 방법은 설문방식을 이용하거나, 머신 러닝을 이용하여 뇌파 데이터를 분석하는 방식으로 진행되어 왔다. 하지만 설문을 이용한 방식은 다소 객관성이 떨어지며, 머신 러닝을 사용하는 방식은 아직까지 높은 정확도를 얻은 연구가 부족하다. 본 논문에서는 뇌파 데이터를 Deep Neural Network (DNN) 딥러닝 알고리즘에 적용하여 객관적인 사이버 멀미 측정 방식을 제안한다. 또한 우리는 더 정확한 사이버 멀미 측정 결과를 위하여 딥러닝 네트워크 구조와 뇌파 데이터 전처리 기법을 제안한다. 우리의 접근 방법은 최대 98.88%의 정확도로 사이버 멀미를 측정한다. 또한 우리는 실험에서 사이버 멀미를 유발하는 영상의 특성을 분석한다. 일반적으로 사이버 멀미는 상하 움직임이 심한 화면, 화면의 지속적이고 빠른 전환, 공중에 떠있는 상황에서 발생한다.

• 방송공학회논문지
• /
• 제27권6호
• /
• pp.848-859
• /
• 2022

본 논문은 일반적으로 사용되는 2D 디스플레이 또는 HMD (Head-Mounted Display) 기반 VR (Virtual Reality, VR) 서비스에서 탈피하여, 대형 가상현실 공연장을 위한 360도 비디오 스트리밍 시스템을 제안한다. 제안된 시스템은 Phase 1, 2, 3의 연구개발 단계를 밟아 6DoF (Degrees of Freedom) 시점 자유도를 지원하는 360도 비디오 스트리밍 시스템을 개발하는 것을 최종목표로 하고 있으며, 현재는 Phase 1: 대형 가상현실 공연장을 위한 3DoF 360도 비디오 스트리밍 시스템 프로토타입의 개발까지 완료되었다. 구현된 스트리밍 시스템 프로토타입은 서브픽처 기반 Viewport-dependent 스트리밍 기술이 적용되어 있으며, 기존 방식과 비교하였을 때 약 80%의 비트율 감소, 약 543%의 영상 디코딩 속도 향상을 확인하였다. 또한, 단순 구현 및 성능평가에서 그치지 않고, 실제 미국 UCSB (University of California, Santa Barbara)에 위치한 대형 가상현실 공연장 AlloSphere에서의 시범방송을 수행하여, 향후 Phase 2, 3 연구단계를 위한 연구적 기반을 마련하였다.

• 경영정보학연구
• /
• 제22권2호
• /
• pp.25-41
• /
• 2020

5G 네트워크 상용화를 앞두고 가상현실(VR) 등 실감형 미디어 산업에 대한 관심이 더욱 높아지고 있다. 하지만 VR 관련 기존 연구는 주로 영상 기술의 활용에만 초점이 맞춰져 있고, 영상의 소비와 인기 요인에 대한 연구는 미흡한 상황이다. 이에 본 연구는 VR 영상의 조회수에 영향을 미치는 요인을 밝혀내어, VR 영상 서비스 운영 및 콘텐츠 제작 측면에서 실무적인 시사점을 제공하고자 한다. 700개 VR 영상 대상으로 조회수에 대한 영향요인을 분석한 결과, 사용자 평가 요인인 좋아요 수 및 어지러워요 수가 가장 큰 영향력을 미치는 것을 확인하였다. 또한 일반 정보 요인인 영상 길이 및 경과일, 내용적 특성 요인인 속편 여부, 각색(One Source Multi Use; OSMU) 여부, 카테고리 등이 순서대로 조회수에 영향을 미쳤다. 반면 VR 영상 등록자의 팔로워 수는 조회수에 영향을 주지 못하였다. 본 연구 결과를 통해 VR 영상의 인기 및 확산을 위해 사용자 평가를 중심으로 영상 추천 및 큐레이션을 제공할 필요성이 있음을 확인하였다.

• 스마트미디어저널
• /
• 제11권9호
• /
• pp.81-93
• /
• 2022

비대면 만남이 일반화 되는 시대에 기존의 사진/영상을 기반으로 한 온라인 만남에서 충족되지 못하는 영역을 확장현실이 빠르게 발전해 나가며 채워가고 있다. 하지만, 가장 보편적으로 확장현실을 경험할 수 있는, 손을 주요 입력도구로 하는 HMD(Head Mount Display)형 혼합현실에서 적용되고 있는 기본 조작들은 표준화 된 체계가 없고 각각의 제조사들에 따라 다른 손동작에 별개로 대응되어 동작하고 있다. 이에 본 연구는 혼합현실에서 수행되는 조작들의 사용성과 효율성을 고려한 체계화된 손동작 매칭체계가 필요하다고 여겨 이를 규명하는 연구를 진행하였다. 먼저, MR환경에서 수행되는 기본적인 조작과 그 속성을 규명하였고, 동시에 손의 구조와 발생할 수 있는 손동작들의 속성들을 규명하였다. 규명한 속성들을 토대로 MR(Mixed Reality)환경에서의 기본조작과 손의 구조/맥락에 따른 미묘한 작동속성을 직관적이고 효율적으로 매칭할 수 있는 체계를 제시하고자 한다.

• 방송공학회논문지
• /
• 제22권6호
• /
• pp.808-816
• /
• 2017

본 논문에서는 360 VR 멀티미디어 시스템에서 복수개의 카메라들이 촬영한 영상 신호들 간의 밝기 차이가 발생하여 360 VR 영상 품질을 저하시키는 것을 막기 위해, 360 VR 시스템에 적합한 밝기 보상 기법을 제안한다. 복수개의 카메라가 촬영한 영상들 간의 특징점들을 분석하고, 이 특징점들을 대상으로 누적 히스토그램을 계산한다. 그리고 이 누적 히스토그램을 기반으로 우선적으로 밝기 보상이 필요한 영상들을 선별한다. 선별된 영상들에 대해서 내부 특징점들의 누적 히스토그램과 외부 특징점들의 히스토그램들을 일치시키기 위한 룩업테이블을 제작하여, 선별된 영상 내부의 모든 화소들의 밝기값을 보상한다. 본 논문의 실험결과에서는 제안하는 알고리즘의 우수성을 히스토그램 보상 측면, 밝기보상 영상의 시각적인 평가, ERP 영상의 화질 평가, Viewport 영상의 화질 평가 등의 측면에서 보였으며, 다양한 기준들에서 제안한 방법이 기존 기술들보다 우수함을 보였다.

• 한국게임학회 논문지
• /
• 제11권6호
• /
• pp.159-170
• /
• 2011

현대사회에서 게임의 영향력은 점차 확대되고 있지만 게임의 도덕적 정체성에 대한 사회적 불신은 줄어들지 않고 있다. 본 연구에서는 게임을 새로운 예술장르로 인식하고 예술과 도덕 간의 관계에 대한 미학적 입장들을 정리함을 통해 사회에서 수용가능한 게임의 도덕적 정체성에 대해 고찰하였다. 이를 바탕으로 새로운 예술형식으로써 게임이 독자적으로 갖고 있는 매체적인 특성에 내재된 도덕적 이슈들을 가상현실성, 상호작용성, 그리고 시뮬레이션의 측면에서 지적하고, 이러한 문제점을 해결하기 위한 가장 효율적인 방안으로 존 듀이의 예술교육론을 반도덕주의적 관점에서 적용한 도덕적 피드백 시스템을 제안하였다.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제13권6호
• /
• pp.3165-3181
• /
• 2019

Spherical videos, which are also called 360-degree videos, have become increasingly popular due to the rapid development of virtual reality technology. However, the large amount of data in such videos is a huge challenge for existing transmission system. To use the existing encode framework, it should be converted into a 2D image plane by using a specific projection format, e.g. the equi-rectangular projection (ERP) format. The existing high-efficiency video coding standard (HEVC) can effectively compress video content, but its enormous computational complexity makes the time spent on compressing high-frame-rate and high-resolution 360-degree videos disproportionate to the benefits of compression. Focusing on the ERP format characteristics of 360-degree videos, this work develops a fast decision algorithm for predicting the coding unit depth interval and adaptive mode decision for intra prediction mode. The algorithm makes full use of the video characteristics of the ERP format by dealing with pole and equatorial areas separately. It sets different reference blocks and determination conditions according to the degree of stretching, which can reduce the coding time while ensuring the quality. Compared with the original reference software HM-16.16, the proposed algorithm can reduce time consumption by 39.3% in the all-intra configuration, and the BD-rate increases by only 0.84%.

• 방송공학회논문지
• /
• 제25권5호
• /
• pp.685-697
• /
• 2020

파노라마(Panorama) 및 360도 영상과 같은 몰입형(Immersive) 미디어 영상은 영상 내 공간을 사용자가 직접 방문한 것 같은 현장감을 제공해야하므로 실제 세계의 모습을 사실 그대로 나타낼 수 있어야 한다. 그러나 파노라마 및 360도 영상에서는 촬영 카메라들간의 시차(Parallax)로 인해 사물이 사라지거나 중복해서 나타나는 현상이 나타나며, 이와 같은 시차 왜곡은 사용자의 콘텐츠 몰입을 방해할 수 있다. 이에 따라서, 시차 왜곡을 극복하기 위한 많은 동영상 스티칭 알고리즘이 제안되고 있지만, Object detection 모듈의 낮은 성능과 Seam 생성 방식 등의 제한으로 여전히 시차 왜곡이 발생하고 있다. 이에 본 논문에서는 기존 동영상 스티칭 기술의 제한 사항을 분석하고, 해당 동영상 스티칭 기술의 제한을 극복하기 위하여 LDPM(Local Differential Pixel Mean) 영상 평가를 활용한 동영상 스티칭의 시차 왜곡 검출 및 정정 방법을 제안한다.

• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2014년도 춘계학술대회
• /
• pp.513-515
• /
• 2014

차세대 영상기술인 Ultra High Definition(이후 UHD)는 보다 높은 임장감을 향해온 제작자와 수용자의 오랜 요구 속에서 태동했다. 역사를 통해 입증되듯이 매체의 변화는 세계를 바라보는 관점과 구체적인 콘텐츠의 변화를 가져왔다. 따라서 UHD의 등장도 독자적인 제작기술이 요구되리라 예상되는 것이다. 이에 본 논문에서는 영상콘텐츠 가운데 다큐멘터리를 중심으로 UHD영상기술에 따른 제작과정의 변화를 연구하고자 한다. 보다 세부적으로 고해상도, 확장된 화면 등의 UHD영상기술이 다큐멘터리 영상제작에서 가져올 변화와 사실성의 전달이라는 다큐멘터리와의 합목적성에 대해 분석하고자 한다. 또한 문제점으로 예상되는 촬영소재의 선택, 방대해진 데이터에 따른 백업과 후반작업 상에서의 개선점에 대해서도 탐구하고자 한다. 이상의 연구계획을 통해 다큐멘터리 제작에서의 UHD영상기술이 가져올 수 있는 발전적 측면을 도출하여 기술의 발전에 따른 콘텐츠 제작의 발전에 기여하고자 한다.

• 한국게임학회 논문지
• /
• 제6권2호
• /
• pp.3-12
• /
• 2006

최근 게임 시장에서 한층 강화된 몰입감을 부여하는 증강현실 기술 기반의 3D 게임들이 등장하고 있다. 본 논문에서는 사용자의 손동작을 인식하여 게임 응용프로그램과 상호작용하는 증강현실 게임의 구현 기법을 제시한다. 웹캠을 통해 입력되는 영상 프레임에서 특징점들을 추출한다. 추출된 특징점들의 움직임을 통해 추적 대상의 움직임을 분석하여 사용자의 의도된 행위를 인식한다. 손동작 추적으로부터의 움직임의 궤적의 형태와 메뉴나 가상객체 위치 관계로부터 사용자의 의도된 움직임을 신뢰성있게 판단하는 기법을 제시한다. 제시한 방법의 우수성 입증을 위해 두 개의 증강현실 응용 시스템을 구현하고 인식의 정확도를 실험하였다. 응용으로 사람의 움직임을 감지해 동작하는 뮤직플레이어와 사용자가 위치한 현실공간에 대응되는 가상공간 내에서 가상농구게임을 개발하였다. 뮤직플레이어에서는 사용자가 손동작으로 다양한 메뉴를 선택할 수 있다. 가상농구게임에서는 가상의 공이 가상공간에 추가되고 이를 사용자가 물리공갈에서 직접 손을 움직여서 가상의 공과 상호작용한다. 사용자의 움직임 인식에 대하여 정상적인 움직임의 사용자에 대해서 평균 94%의 정확도를 보였으며 급격한 움직임의 사용자에 대해서는 약 84%의 정확도를 보였다.