• 한국콘텐츠학회논문지
• /
• 제21권8호
• /
• pp.79-88
• /
• 2021

코로나19로 인해 공연계가 심각한 위기에 직면하게 되었고 이를 해결하기 위한 방안 중 하나로 비대면 공연 영상화가 활발히 진행되고 있다. 그러나 비대면 공연영상은 몇 가지 문제를 드러내기 시작했다. 첫째, 경제적 이유로 고 퀄리티 촬영이 힘든 단체가 많고, 둘째, 공연의 특성을 느낄 수 없다는 것이다. 이를 해결할 방안으로 360도 VR공연영상이 부각되고 있다. 이에 본 연구는 360도 VR공연영상의 제작과정은 어떻게 진행 되는 지를 연극<공기 없는 세계>와 동화콘서트<자라는 자라> 공연을 통해 살펴보았다. 그 결과 '실제감을 통한 현장성'과 '촬영의 편이성', '배우연기의 연속성'이란 세 가지 효과를 확인할 수 있었다. 그와 더불어 '전문촬영업체의 부족', '비싼 관람 장비', '플랫폼의 부재', '카메라 기술력의 한계' 등 여러 문제점을 발견하였고, 이를 근거로 360도 VR공연영상의 활용을 위한 해결방안을 제안할 수 있었다.

• IEIE Transactions on Smart Processing and Computing
• /
• 제6권2호
• /
• pp.102-108
• /
• 2017

Videos for 360-degree virtual reality (VR) systems have a large amount of data because they are made with several different videos from multiple cameras. To store the VR data in limited space or to transmit it through a channel with limited bandwidth, the data need to be compressed at a high ratio. This paper focuses on the compression efficiency of VR videos for good visual quality. Generally, 360-degree VR videos should be projected into the planer format to cope with modern video coding standards. Among various projection schemes, three typical schemes (equirectangular, line-cubic, and cross-cubic) are selected and compared in terms of compression efficiency and quality using various videos.

• 방송공학회논문지
• /
• 제25권2호
• /
• pp.185-191
• /
• 2020

MPEG-I에서는 최대 6자유도(6DoF)를 가지는 몰입형 비디오의 압축 표준화를 진행하고 있다. 360 비디오에 움직임 시차(parallax)를 추가한 것으로 정의되는 3DoF+ 비디오의 가상 공간에서, 원하는 위치와 시점의 장면을 제공하려면 3DoF+ 비디오를 구성하는 여러 뷰(view) 비디오를 사용하여 임의의 원하는 시점의 뷰를 렌더링해야 한다. MPEG-I 비쥬얼 그룹에서는 이러한 3DoF+ 비디오의 효율적인 부호화를 위한 표준화가 진행되고 있으며, TMIV(Test Model for Immersive Video)라는 시험모델을 개발하고 있다. 본 논문은 TMIV에서 패치(patch)를 아틀라스(atlas)에 효율적으로 패킹하여 부호화 성능을 향상시킬 수 있는 패치 패킹 방법을 제안한다. 제안기법은 패킹되는 패치들 간에 보호대역(guardband)을 적용하여 패치 간의 거리를 둠으로써 부호화로 인해 발생할 수 있는 아티팩트(artifact)를 줄여 최종 복원 뷰의 화질을 향상시킨다.

• 한국산업정보학회논문지
• /
• 제22권3호
• /
• pp.27-38
• /
• 2017

본 연구는 다수의 개인 사용자들이 휴대폰 카메라를 통하여 공연장 등에서 녹화한 다수의 영상을 스티칭하는 방법을 제시한다. 기존 고정형 리그(Rig)를 사용하는 360 카메라 솔루션과 대비하여, 시간 동기화, 반복적 변환행렬계산 및 카메라 센서 불일치 보정과 같은 새로운 문제들을 해결해야한다. 이 논문에서는 오디오를 사용한 시각동기화 방법, 색상 전달 방식에 따른 센서 불일치 제거, 전역 동작 안정화 알고리즘을 사용하여 변환 행렬의 업데이트를 함으로써 이러한 문제를 해결하였다. 또한, 카메라의 움직임이 크지 않은 경우에서, 제안 된 알고리즘은 화면 별 스티칭을 하는 경우 보다, 계산 속도와 화질 면에서도 우수한 성능을 보임을 실험을 통하여 확인하였다.

• 한국게임학회 논문지
• /
• 제17권6호
• /
• pp.19-28
• /
• 2017

최근 VR(Virtual Reality) 기술을 기반으로 하는 다양한 형태의 가상현실 콘텐츠가 개발되고 있다. 하지만 빠른 속도로 발전하고 있는 가상현실 디바이스 기술에 비해 이러한 디바이스를 적극적으로 활용하는 가상현실 기반 게임 콘텐츠 개발은 부진한 편이다. 본 논문에서는 가상현실 기술을 기반으로 하는 디바이스 중 사용자의 접근성이 높은 HMD(Head Mounted Display) 부착형 모바일 기기를 활용하여 가상현실 노래방을 두 가지 형태의 서로 다른 가상현실 재현방법론(실사기반의 3D 가상현실 공간 생성과 실사기반의 $360^{\circ}$ 영상 방식)으로 개발하고 이에 대한 사용자의 사실감과 몰입감에 대하여 사용자 테스트를 통해 비교 결과를 제시한다. 본 연구진은 논문의 비교 결과가 향후 모바일 기반 가상현실 콘텐츠 개발시 개발 지침으로 활용될 것으로 기대한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2022년도 하계학술대회
• /
• pp.839-842
• /
• 2022

실감적인 가상 현실을 위해서는 고화질의 360 도 영상 스트리밍이 필요하다. 그러나 이는 높은 대역폭과 연산량을 요구하기 때문에 일반적인 가상 현실 기기로는 감당하기 힘들다. 이를 보완하기 위한 360 도 영상 부호화 및 전송 기술이 활발히 연구되고 있으며, 대표적으로 사용자 시점 기반 타일 스트리밍 기법 등이 있다. 본 논문은 기존의 CTU 기반 스트리밍과 타일 기반 스트리밍과 함께 복호기 적응적인 단일 계층 타일 바인딩을 활용한 타일기반 스트리밍의 부호화 및 복호화 성능을 비교한다. 수행된 실험결과, 단일 계층 타일 바인딩을 활용한 타일 스트리밍 방법이 기존의 타일 스트리밍 기법에 비해 유사한 비트율 성능에 대비하여 복호화 시간에서 큰 이득을 볼 수 있음을 확인하였다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2018년도 추계학술대회
• /
• pp.22-24
• /
• 2018

MPEG-I Visual group is actively working on enhancing immersive experiences with up to six degree of freedom (6DoF). In virtual space of omnidirectional 6DoF, which is defined as a case of degree of freedom providing 6DoF in a restricted area, looking at the scene from another viewpoint (another position in space) requires rendering additional viewpoints called virtual omnidirectional viewpoints. This paper presents the performance analysis on view synthesis, which is done as the exploration experiment (EE) in MPEG-I, from a set of 360 videos providing omnidirectional 6DoF in various ways with different distances, directions, and number of input views. In addition, we compared the subjective quality between synthesized images with one input view and two input views.

• 방송공학회논문지
• /
• 제23권2호
• /
• pp.197-205
• /
• 2018

파노라마 이미지는 현재 흔하게 사용되는 기술 중 하나이다. 하지만, 아직까지 파노라마 비디오 제작은 기술적 어려움이 존재한다. 360도 카메라와 같은 특수 카메라가 없을 경우, 파노라마 비디오 제작은 더욱 어려워진다. 파노라마 비디오를 제작하기 위해서는 여러 지점에서 촬영한 다수의 동영상의 시간축을 동기화할 필요가 있다. 하지만 카메라 내부 시계를 통한 시간축 동기화 기법은 내부 하드웨어 차이로 인해 오차가 발생할 수 있다. 이러한 문제를 해결하기 위해 영상 정보 또는 소리 정보를 이용한 다수 비디오 간 시간축 동기화 연구가 진행되었다. 하지만 영상 정보를 이용하는 경우 정확도와 프로세싱 시간에 문제가 있으며 소리 정보를 이용하는 경우 노이즈에 민감하거나 멜로디가 없으면 동기화가 없다는 문제점이 있다. 따라서 본 논문에서는 소리 파형을 이용한 다수 비디오 간 시간축 동기화 기법을 제안한다. 영상 정보 기반 시간축 동기화 기법보다 높은 동기화 정확도를 보여주며 시간적 효율성을 보여준다.

• 문화기술의 융합
• /
• 제9권5호
• /
• pp.849-857
• /
• 2023

볼류메트릭 스튜디오는 XR 콘텐츠 시장의 성장을 견인하고 있다. 이에 따라, 볼류메트릭 캡처 기술에 관한 기술적 연구 수요가 증가하고 있다. 이 연구에서는 댄서들의 움직임을 3D 영상 이미지로 캡처하는 과정과 결과를 분석하였으며, 유의미한 결과를 얻기 위해 볼류메트릭 스튜디오의 인프라와 워크플로우를 평가하여 볼류메트릭 캡처 기술의 실제적 방법론에 관해 탐색하였다. 본 연구를 통해 볼류메트릭 스튜디오 내에서 영상 이미지 왜곡과 렌더링 시간과 관련된 제한사항들이 확인되었다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2017년도 추계학술대회
• /
• pp.1-2
• /
• 2017

최근 기존의 설치형 어플리케이션으로 제공되던 워드 프로세서나 스프레드 시트 등이 RIA(Rich Internet Application)와 Ajax(Asynchronous JavaScript and XML)같은 기술의 발달로 구글 독스(Google Docs)와 같이 웹브라우저(Web Browser)에서 동작하는 형태의 클라우드 기반 웹 어플리케이션으로 제작되어 널리 사용되고 있다. 또한 기존의 웹 기술로는 구현하기 어려웠던 동영상 포맷 변환이나 사진이나 동영상에 필터를 적용하는 것과 같은 영상처리가 가능한 클라우드 기반 웹 어플리케이션이 등장하고 있는 실정이다. 이에 본 논문은 컴퓨팅 자원을 많이 사용하고, 장시간의 변환이 필요한 360도 영상의 변환과정에 꼭 필요한 기술인 포토스티칭(Photo-stitching)을 클라우드에서 가능하게 하는 프론트엔드 및 백엔드를 구현하고, 웹소켓(Websocket)기술을 활용하여 실시간으로 변환결과를 전달 받을 수 있도록 하였다.