• 방송공학회논문지
• /
• 제24권6호
• /
• pp.1035-1052
• /
• 2019

최근 몰입형 비디오의 수요가 점차 늘어남에 따라 국제 표준 단체인 MPEG-I에서 전방위 몰입형 비디오의 처리 기술이 활발하게 개발 중이다. 전방위 몰입형 비디오는 사용자 시점의 자유도가 증가함에 따라 비디오 신호의 크기가 급격히 증가하여 효과적인 압축 기술이 필수적이다. 더욱이 사용자의 움직임에 따른 보다 자유로운 시점 변환을 지원하는 6 자유도 (6-Degree-of_Freedom, 6DoF) 비디오의 압축을 위해서는 보다 우수한 부호화 효율을 제공하는 코덱의 개발이 필요하다. 본 논문에서는 ISO/IEC 23090 Part 7 (Metadata for Immersive Media (Video))에서 진행 중인 몰입형 비디오의 압축 표준 프로젝트의 테스트 모델인 TMIV (Test Model for Immersive Video)에 기존 적용된 High Efficiency Video Coding (HEVC)를 최근 차세대 비디오 압축 표준 개발 중인 Versatile Video Coding (VVC)로 대체하여 성능 분석을 수행하고, VVC의 툴 분석으로부터 디블로킹 필터를 TMIV의 패치 아틀라스에 선택적으로 적용하는 것이 부호화 효율을 증대시킬 수 있음을 보인다. VVC 기반의 6 DoF 비디오 코덱의 성능 평가는 본 논문이 최초로 그에 따른 향후 6DoF지원 몰입형 비디오 표준 개발 방향을 제시한다. TMIV의 두 가지 작동 모드인 MIV (Metadata for Immersive Video) 모드와 MIV 시점 모드에서 공통 실험 조건에 명시된 일곱 가지 시퀀스에 대해 전체적으로 실험을 진행하였다. 기존 HEVC를 VVC로 대체함으로써 MIV 모드 방식에서 33.8%, MIV 시점 모드에서 30.2%의 Peak Signal-to-Noise Ratio (PSNR) 관점에서의 부호화 성능 향상을 제공하였다. 이외에도 3차원 비디오의 인지 화질 평가를 위하여 사용하는 평가 지표로 IV-PSNR (Immersive Video PSNR)와 MSSIM (Mean Structural Similarity)를 이용하여 성능을 평가하였다.

• ETRI Journal
• /
• 제44권1호
• /
• pp.62-72
• /
• 2022

In this study, we propose a multi-GPU-based 8KVR stitching system that operates in real time on both local and cloud machine environments. The proposed system first obtains multiple 4 K video inputs, decodes them, and generates a stitched 8KVR video stream in real time. The generated 8KVR video stream can be downloaded and rendered omnidirectionally in player apps on smartphones, tablets, and head-mounted displays. To speed up processing, we adopt group-of-pictures-based distributed decoding/encoding and buffering with the NV12 format, along with multi-GPU-based parallel processing. Furthermore, we develop several algorithms such as equirectangular projection-based color correction, real-time CG overlay, and object motion-based seam estimation and correction, to improve the stitching quality. From experiments in both local and cloud machine environments, we confirm the feasibility of the proposed 8KVR stitching system with stitching speed of up to 83.7 fps for six-channel and 62.7 fps for eight-channel inputs. In addition, in an 8KVR live streaming test on the 5G MEC/cloud, the proposed system achieves stable performances with 8 K@30 fps in both indoor and outdoor environments, even during motion.

• Journal of Multimedia Information System
• /
• 제8권4호
• /
• pp.277-284
• /
• 2021

Despite skepticism about commercial potential, the stereoscopic 3D cinema is still a form that any filmmaker can choose to employ for its aesthetics and its immersive potential. Based on a haptic illusion, the stereoscopic media content requires a new perspective different from the principle of 2D media content in terms of creation and acceptance. This paper examines the technical and aesthetic issues of stereoscopic 3D film production from the perspective of today's emerging realistic and immersive media through a case study. One of the key factors for successful content creation and research and development in stereoscopic 3D cinema is the combination of artistic principles together with technical mastering of the new image technology. The purpose of this paper is to outline the principal challenges and research topics in stereoscopic 3D cinema through a case study of stereoscopic 3D pilot film production for the 'User-Selective UHD Stereoscopic Media Service Platform' of the ETRI (Electronics and Telecommunications Research Institute). This paper intends to examine stereoscopic 3D filmmaking workflow and production methodologies, as well as technical elements and aesthetic issues.

• 전자통신동향분석
• /
• 제32권5호
• /
• pp.1-9
• /
• 2017

This study focuses on the ongoing immersive Giga Media service platform technology developed by the Electronics and Telecommunications Research Institute(ETRI) for various projects of the Giga KOREA Foundation[1] to achieve a smart ICT environment including wireless-based Giga service by 2020. This technology enables an immersive realistic Tele-Experience service that supports immersive real-world interaction as if sharing one's surroundings in a particular location through a high-speed network among remote users. It is expected to contribute greatly to the activation of smart ICT.

• 한국콘텐츠학회논문지
• /
• 제21권5호
• /
• pp.654-667
• /
• 2021

본 연구는 디지털미디어아트에서 사용되는 몰입형 기술의 특성과 미디어아트의 관람특성에 따른 적합성 지각이 몰입감과 만족도, 그리고 재방문의도에 미치는 영향에 대해 살펴보았다. 이를 위해 제주도의 빛의 벙커와 아르떼 뮤지엄에서 디지털미디어아트 관람객 326명을 대상으로 온라인 서베이를 실시하였다. 구조방정식 모형을 통해 분석한 결과, 몰입기술 특성의 프로젝션 매핑품질과 미디어아트 관람특성의 원작의 유사도와 원작의 명성도가 높을수록 적합성을 높게 지각하는 것으로 나타났다. 또한, 원작의 접근성이 낮을수록 적합성을 높게 지각하는 것으로 나타났다. 이때, 원작의 유사도, 원작의 명성도, 프로젝션 매핑품질, 원작의 접근성 순으로 적합성에 미치는 영향력이 큰 것으로 나타났다. 한편, 몰입기술 특성의 상호작용성은 적합성 지각에 유의한 영향을 미치지 않았다. 또한, 몰입기술과 미디어아트 간의 적합성 지각이 미디어아트 전시회에 대한 몰입감을 높이는 것으로 나타났으며, 이러한 몰입감은 관객의 전시회에 대한 만족도를 높여서 재방문의도에 긍정적 영향을 미치는 것으로 나타났다. 본 연구결과는 몰입형 기술의 특성과 미디어아트의 관람특성이 디지털미디어아트 수용에 미치는 영향을 실증적으로 살펴보았다는 점에서 이론적, 실무적 시사점을 제공하고 있다.

• 디지털융복합연구
• /
• 제19권12호
• /
• pp.435-441
• /
• 2021

최근 디지털미디어 기술의 발전으로 관객에게 실감 나고 사실적인 전시 체험을 제공하는 몰입형 체험전시들이 늘어나고 있다. 본 연구에서는 이러한 몰입형 체험전시들의 대표사례들을 전시연출 요소를 중심으로 분석하고, 몰입형 체험전시 연출 및 기획에 게임기획 요소를 적용하여 개최 및 운영한 '히어로의 모험' (이하 히어로의 모험) 전시 사례를 소개하였다. 본 전시는 도전, 목표, 갈등, 규칙, 승패와 같은 게임기획 요소를 적용하여, 캐릭터의 갈등구조 설정 및 악당 캐릭터를 물리치는 도전과 목표를 제시하고, 승패를 가루는 전시 게임들을 제공하여, 최종 보스까지 물리치도록 전시를 디자인했다. 연구를 통해 관객의 전시 만족을 위해 게임 요소 적용이 더 효과적이다 보기는 어렵지만, 관객의 콘텐츠 소비 시간을 늘리고 재방문을 높이기 위해서는 게임기획 요소 적용을 고려하는 것을 제언하는 바이다.

• 전자통신동향분석
• /
• 제33권2호
• /
• pp.48-55
• /
• 2018

Immersive media, which maximizes the viewer's sense of presence and immersion, has been developed in the form of 3D stereoscopic media and UHD media. Going one step further, VR media, which can provide immersive experiences within an artificially created environment, have recently been considered a type of next-generation media. Within this trend, numerous IT and broadcasting companies around the world are actively investing their time and resources to boost the emerging VR industry. In this paper, we introduce the representative VR media acquisition and broadcasting service technologies that are leading the current VR industry.

• 정보화정책
• /
• 제24권1호
• /
• pp.3-29
• /
• 2017

본 연구는 가상현실, 증강현실, 혼합현실, 360도 동영상 등 다양하게 사용되는 차세대 실감미디어에 대한 사용자 관점의 이해를 목적으로 한다. 한 때, 3D 영상의 광풍이 불더니 곧 초고화질(UHD) TV가 그 자리를 차지하고, 지금은 가상현실이 실감미디어를 대표하는 그리고 차세대 먹거리 산업이라는 표현으로 미래 혁신 산업의 핵심 키워드로 자리하고 있다. 가상현실이 이렇게 산업적으로 중요한 역할을 함에 따라, 본 논문에서는 미디어 풍요성, 상호작용성, 프레즌스, 신체소유감, 사용자 경험 그리고 시지각과 같은 가상현실과 관련된 여섯 개의 이론적 접근을 통해 학술적 이해와 더불어 현장에 적용 가능한 가능성을 담아내고자 한다. 이 여섯 개의 이론은 3D 영상과 같은 실감미디어 연구에 많이 사용되는데, 미디어 풍요성과 상호작용성은 긍정적 또는 부정적 태도를 형성하는 주요한 요인이고, 프레즌스는 몰입을, 사용자 경험은 총체적 심리적 반응을 그리고 시지각은 '본다'라는 경험이 뇌의 활동과 더불어 얼마나 복잡한 과정을 겪는지 설명한다. 특히 신체 소유감은 그간 미디어 연구에 적용된 사례가 많지 않으나 가상현실 연구에 활용가능성이 매우 높은 이론으로 추후 실감미디어 연구에 많은 기여를 할 수 있을 것으로 보인다. 가상현실과 관련된 사용자 관점의 주요 이론은 가상현실을 연구하는 연구자는 물론, 하드웨어와 콘텐츠 제작자에게도 많은 함의를 제공할 것이다.

• International Journal of Internet, Broadcasting and Communication
• /
• 제15권2호
• /
• pp.196-201
• /
• 2023

In recent years, virtual reality (VR) technology has been widely used in many industrial fields, especially in the fields of medical treatment, games, film and television, to improve the interaction between medical teaching and practical treatment. On the gaming side, the production of virtual reality gaming screens and scenes became increasingly popular, greatly expanding the form of the visual experience. But VR is no longer confined to the health care, education and entertainment industries. During this time, the news media industry has also begun to integrate virtual reality into interviews and user interactions. This study aims to analyze the development of VR technology from the perspectives of immersive VR news experience, real reporting, and prospects, and analyze and think about the interactive participation of media users, the transformation of traditional media, and the upgrading of practitioners' roles.

• 방송과미디어
• /
• 제19권1호
• /
• pp.22-30
• /
• 2014