• Electronics and Telecommunications Trends
• /
• v.38 no.2
• /
• pp.46-55
• /
• 2023

Extended reality (XR) provides an immersive virtual experience by using various media. The XR virtual environment enables interactions between the real and virtual worlds in virtual, augmented, and mixed reality scenarios. XR is being used in various areas such as industry, medical care, road transportation, gaming, education, and culture. XR and multimedia enhancement are important business scenarios for fifth-generation (5G) mobile networks. As users' demand for emerging media services gradually increases, enhancements in networks should be implemented for delivering multimedia services such as XR. We describe related standardization trends and requirements of the XR service in 5G mobile networks. We also discuss technological enhancements for 5G mobile networks as specified by the 3GPP SA2 working group.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.11a
• /
• pp.128-130
• /
• 2018

이 논문은 3D 입체 음향에 대한 좌표 취득 및 표출 방법을 제안한다. 3차원 좌표를 추정하기 위해 다시점 영상의 색상 영상을 통해 중간 시점의 깊이 영상을 생성한다. 깊이 영상 내에서 객체에 대한 이미지 좌표와 깊이 정보를 이용하여 3차원 좌표를 취득한다. 실험 결과를 통해 깊이 영상에서 도출된 객체의 좌표를 음원의 좌표로 설정하여 3D 입체 음향 표출의 효율을 높일 수 있음을 확인한다.

• Fashion & Textile Research Journal
• /
• v.25 no.4
• /
• pp.429-438
• /
• 2023

In the 21st century fashion industry, the rise of digital environments has transformed it into a dynamic medium, expanding the horizons of media utilization. Consequently, digital fashion film has emerged as a pivotal tool for fashion communication. Functioning as a visual expression medium, fashion film animates fashion concepts into immersive moving images. Proficiency in digital fashion communication has become imperative, considering the attributes of fashion media. Notably, the role of creative directors in ensuring coherent communication across diverse fashion media platforms has gained prominence, underscoring the need for systematic fashion education to nurture specialized talent. This study, therefore, devised a comprehensive curriculum amalgamating fashion communication and practical digital media skills, implemented within fashion major courses. Through this approach, students gained experimental media proficiency and explored innovative approaches to crafting fashion films that eloquently convey fashion narratives. The participants were exposed to the entire spectrum of fashion media production, encompassing digital storytelling, fashion film conceptualization, filming techniques, meticulous editing, and adept utilization of special effects technology. The study's pedagogical strategy, characterized by a focused learning trajectory, garnered significant acclaim. In essence, this study holds significance by formulating a curriculum that nurtures the imaginative and pragmatic aptitudes of fashion majors, immersing them in the dynamic realm of rapidly evolving digital fashion films and their integration with fashion content.

• Journal of Broadcast Engineering
• /
• v.25 no.5
• /
• pp.665-671
• /
• 2020

MPEG-I is actively working on standardization on the coding of immersive video which provides up to 6 degree of freedom (6DoF) in terms of viewpoint. 3DoF+ video, which provides motion parallax to omnidirectional view of 360 video, renders a view at any desired viewpoint using multiple view videos acquisitioned in a limited 3D space covered with upper body motion at a fixed position. The MPEG-I visual group is developing a test model called TMIV (Test Model for Immersive Video) in the process of development of the standard for 3DoF+ video coding. In the TMIV, the redundancy between a set of input view videos is removed, and several atlases are generated by packing patches including the remaining texture and depth regions into frames as compact as possible, and coded. This paper presents an atlas generation method that removes small-sized blocks in the atlas for more efficient 3DoF+ video coding. The proposed method shows a performance improvement of BD-rate bit savings of 0.7% and 1.4%, respectively, in natural and graphic sequences compared to TMIV.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• fall
• /
• pp.62-64
• /
• 2021

최근 코로나 19의 확산으로 인하여 코로나 감염으로 인한 외부 방송 촬영에 제약이 생기면서, 제작환경은 실외에서 실내의 가상 환경 제작 수요가 크게 증가하고 있다. 이에 확장현실 제작 기술이 방송 제작에 적극 활용되고 있다. 확장현실은 외부의 제작 환경을 몰입형 LED월 시스템 기반으로 가상의 그래픽으로 내부 스튜디오 제작환경에서 제작 할 수 있어 방송에서는 확장현실 관련 시스템 및 그래픽 콘텐츠, 운영기술 개발이 요구되고 있다. 이에 본 논문은 확장현실 콘텐츠를 제작 할 수 있는 '몰입형 혼합현실 시스템'을 제안한다. 특히, 확장현실 환경에서 원격으로 AR과 VR 콘텐츠의 동기를 맞추어 운영할 수 있도록 개발된 '원격제어 타임라인 디렉터'를 통해 AR/VR 콘텐츠를 재생 및 입출력을 제어할 수 있다. 본 시스템을 통하여 그래픽 기반의 AR/VR 시험 그래픽 콘텐츠 및 실사 기반의 360 콘텐츠 기반 확장현실 시험 콘텐츠를 개발하였으며, 상용카메라 추적시스템과 연개하어 자연스러운 추적 및 합성 그리고 타임라인 디렉터의 사용자 인터페이스를 이용하여 확장현실 콘텐츠를 제작 및 운영 할 수 있음을 확인하였다.

• Journal of Broadcast Engineering
• /
• v.24 no.7
• /
• pp.1209-1220
• /
• 2019

The demand for virtual reality (VR) is rapidly increasing. Providing the immersive experience requires much operation and many data to transmit. For example, a 360-degree video (360 video) with at least 4K resolution is needed to offer an immersive experience to users. Moreover, the MPEG-I group defined three degrees of freedom plus (3DoF+), and it requires the transmission of multiview 360 videos simultaneoulsy. This could be a burden for the VR streaming system. Accordingly, in this work, a bitrate-saving method using projection conversion is introduced, along with experimental results for streaming 3DoF+ 360 video. The results show that projection conversion of 360 video with 360lib shows a Bjontegaard delta bitrate gain of as much as 11.4%.

• Journal of KIISE:Computing Practices and Letters
• /
• v.9 no.6
• /
• pp.602-609
• /
• 2003

Emerging high-speed next-generation Internet is enabling immersive media communication systems and applications to realize geographically distributed team collaborations while overcoming the limit of distance and time. Focusing on the reliable real-time delivery of 3D (i.e., stereo) video among corresponding parties, in this paper, key schemes for stereo video processing/display and reliable transport of stereo video packets over high-speed Internet are designed and implemented. The performance of proposed stereo video delivery system is evaluated both by emulating various network situations for quantitative comparison and by transmitting over real-world Internet up to the speed of around 100 Mbps. The results demonstrate the feasibility of the proposed system in supporting the desired immersive communication.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2022.11a
• /
• pp.151-153
• /
• 2022

최근 Moving Picture Experts Group(MPEG)에서는 2차원 비디오 압축 표준인 Versatile Video Coding(VVC)에 이어서 다양한 영상 포맷들에 대한 압축 방식을 표준화하고 있다. 특히, 가상현실, 증강현실, 혼합현실 등의 지원을 위한 Six Degrees of Freedom(6DoF) 입체영상 콘텐츠들이 최근 다양한 분야들에서 활용되고 있는데, 6DoF 입체영상은 일반적으로 복수 시점의 고해상도 칼라영상과 깊이영상으로 구성된다. 이러한 고해상도의 6DoF 몰입형 입체영상을 제한된 네트워크 환경에서 완벽한 서비스를 목표로 MPEG에서는 몰입형 입체영상 압축 기술인 MPEG Immersive Video(MIV) 표준화를 활발하게 진행 중에 있다. MIV에서는 기본 뷰(Basic View)로 이루어진 영상과 추가 뷰(Addtional View)에서 중복성 높은 픽셀들이 제거된 아틀라스 패치로 이루어진 영상을 각각 VVC로 압축한다. 하지만 아틀라스 패치로 이루어진 영상의 경우에는 일반적인 2차원 칼라영상과 다른 특성을 가지기 때문에, VVC 인루프 필터 기술이 비효율적일 수 있다. 따라서, 본 논문에서는 MIV 표준에서의 VVC 인루프 필터들의 성능을 분석한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.305-307
• /
• 2020

이머시브 비디오 서비스를 위해 MPEG-I Visual 그룹에서는 3DoF+ 기술과 관련하여 MIV(Metadata for Immersive video)의 표준화를 진행하고 있으며, 이를 위해 다시점 영상 및 전방위 장면을 촬영한 ERP 규격의 영상들이 주어진 경우에 운동시차를 제공할 수 있는 영상 합성 레퍼런스 소프트웨어인 TMIV SW를 제공한다. TMIV는 기본적으로 송신부인 인코더와 수신부인 디코더로 구성이 되어있으며, 인코더에서 가장 중요한 기능은 다수의 입력 시점영상 간의 중복된 데이터를 찾아내서 제거하는 프루닝 과정이다. 프루닝 방법에 따라 데이터 전송량과 디코더에서의 합성 품질이 달라지기 때문에 인코더에서 핵심이라고 할 수 있다. 본 논문은 인코더의 프루닝의 효율을 높이기 위해 전체 흐름도에서 프루닝 순서 변경 과정을 추가하고 그 과정에서 시점 영상간 중첩 영역을 계산하여 이를 토대로 프루닝 순서를 결정하는 방법을 제안하였고 이를 통해 데이터 압축률이 향상됨을 확인할 수 있었고, 또한 수신부에서 영상 합성의 품질이 달라짐을 확인할 수 있었다.

• Journal of Broadcast Engineering
• /
• v.25 no.5
• /
• pp.685-697
• /
• 2020

Immersive media videos, such as panorama and 360-degree videos, must provide a sense of realism as if the user visited the space in the video, so they should be able to represent the reality of the real world. However, in panorama and 360-degree videos, objects appear to overlap or disappear due to parallax between cameras, and such parallax distortion may interfere with immersion of the user's content. Accordingly, although many video stitching algorithms have been proposed to overcome parallax distortion, parallax distortion still occurs due to the low performance of the Object detection module and limitations of the Seam generation method. Therefore, this paper analyzes the limitations of the existing video stitching technology and proposes a method for detecting and correcting parallax distortion of video stitching using the LDPM (Local Differential Pixel Mean) image evaluation method that overcomes the limitations of the video stitching technique.