• ETRI Journal
• /
• 제44권1호
• /
• pp.24-37
• /
• 2022

Virtual view synthesis, which generates novel views similar to the characteristics of actually acquired images, is an essential technical component for delivering an immersive video with realistic binocular disparity and smooth motion parallax. This is typically achieved in sequence by warping the given images to the designated viewing position, blending warped images, and filling the remaining holes. When considering 6DoF use cases with huge motion, the warping method in patch unit is more preferable than other conventional methods running in pixel unit. Regarding the prior case, the quality of synthesized image is highly relevant to the means of blending. Based on such aspect, we proposed a novel blending architecture that exploits the similarity of the directions of rays and the distribution of depth values. By further employing the proposed method, results showed that more enhanced view was synthesized compared with the well-designed synthesizers used within moving picture expert group (MPEG-I). Moreover, we explained the GPU-based implementation synthesizing and rendering views in the level of real time by considering the applicability for immersive video service.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 1998년도 추계종합학술대회 논문집
• /
• pp.867-870
• /
• 1998

Video data is usually stored in a compressed format in order to reduce the storage space. For efficient browsing, searching, and retrieval of compressed video sequences, size-reduced images (or DC images which are formed with block DC coefficients) are generally preferred to avoid unnecessary computational complexity. In this paper, we propose a DC image extraction scheme appropriate for scene analysis and efficient browsing of compressed video sequences. The proposed algorithm utilizes predicted low frequency AC coefficients to achieve better approximation and to reduce the error drift. Due to the AC prediction based on a quadratic surface model, the proposed scheme requires no additional memory compared with the previous zero-order or first-order approximation scheme. Simulation results show that the proposed scheme achieves better subjective and objective quality with minor additional operations.

• 조명전기설비학회논문지
• /
• 제22권7호
• /
• pp.37-42
• /
• 2008

In this paper, a real-time multiview video coding system using fast disparity estimation is proposed. In the multiview encoder, adaptive disparity-motion estimation (DME) for an effective 3-dimensional (3D) processing are proposed. That is, by adaptively predicting the mutual correlation between stereo images in the key-frame using the proposed algorithm, the bandwidth of stereo input images can be compressed to the level of a conventional 2D image and a predicted image also can be effectively reconstructed using a reference image and adaptive disparity vectors. Also, in multiview decoder, intermediate view reconstruction (IVR) using adaptive disparity search algorithm (DSA) for real-time multiview video processing is proposed. The proposed IVR can reduce a processing time of disparity estimation by selecting adaptively disparity search range. Accordingly, the proposed multiview video coding system is able to increase the efficiency of the coding rate and improve the resolution.

• 한국측량학회지
• /
• 제15권2호
• /
• pp.185-193
• /
• 1997

While close range photogrammetry has been widely applied for static deformation analysis, video cameras have many characteristics that make them the sensors of choice for dynamic analysis of rapidly changing situations. They also have limitations. The aim of this research is to explore the potential of a video system for monitoring dynamic objects. A pilot system consists of two camcorders, VCR, and PC with frame grabber. To estimte the performance of this system for moving objects, a car was imaged covering several phases when starting to drive. The sequential images of a moving car were recorded on VCR. 15 images per second were digitized in an off-line mode by frame grabber. The image coordinates of targets attached to the rear bumper of a car were acquired by IDRISI, and the object coordinates were derived based on DLT. This research suggests that home video cameras, PC, and photogrammetric principles are promising tools for monitoring of the moving objects and vibrations as well as other time dependent situations.

• 대한원격탐사학회:학술대회논문집
• /
• 대한원격탐사학회 2003년도 Proceedings of ACRS 2003 ISRS
• /
• pp.882-884
• /
• 2003

We present an application of digital video images for object tracking. In order to track a fixed object, which was shoot on a moving vehicle, this study develops a shape-based matching algorithm to implement the tracking task. Because the shape-based matching algorithm has scale and rotation invariant characteristics, therefore it can be used to calculate the similarity between two variant shapes. An experiment is performed to track the ship object in the open sea. The result shows that the proposed method can track the object in the video images even the shape change largely.

• 대한원격탐사학회:학술대회논문집
• /
• 대한원격탐사학회 2002년도 Proceedings of International Symposium on Remote Sensing
• /
• pp.169-174
• /
• 2002

In this paper, we suggest a new spatial information system called video GIS where video is used for spatial data construction and is integrated with map. We develop a prototype system of video GIS and apply it to roadside facility management. The main functions supported by the suggested system are data collection, coordinate calculation and conversion, data construction, analysis, searching, and browsing. The stereo images and corresponding position data are collected by a vehicle named 4S-Van that has GPS, IMU, and cameras. The 3-D coordinates of the objects in the images, such as road sign, signal lamp, and building, can be calculated and constructed from the collected data. The spatial objects are displayed on both image and map, and can be searched and browsed, which enables visual and realistic browsing and management of spatial objects. Compared to conventional field survey used in roadside facility management, the method enables faster, easier, and more efficient construction of spatial data. The suggested video GIS can be applied not only to roadside facility management but also to many similar projects of central or local governments that are related to GIS.

• Journal of Multimedia Information System
• /
• 제4권1호
• /
• pp.19-26
• /
• 2017

The compression of video for both full HD and UHD requires the inclusion of extra vertical lines to every video frame, named as the DTV essential hidden area (DEHA), for the effective functioning of the MPEG-2/4/H encoder, stream, and decoder. However, while the encoding/decoding process is dependent on the DEHA, the DEHA is conventionally viewed as a redundancy in terms of channel utilization or storage efficiency. This paper proposes a block mode DEHA method to more effectively utilize the DEHA. Partitioning video block images and then evenly filling the representative DEHA macroblocks with the average DC coefficient of the active video macroblock can minimize the amount of DEHA data entering the compressed video stream. Theoretically, this process results in smaller DEHA data entering the video stream. Experimental testing of the proposed block mode DEHA method revealed a slight improvement in the quality of the active video. Outside of this technological improvement to video quality, the attractiveness of the proposed DEHA method is also heightened by the ease that it can be implemented with existing video encoders.

• 방송공학회논문지
• /
• 제14권5호
• /
• pp.601-615
• /
• 2009

본 논문에서는 3D-Video에서 가상시점 영상을 생성하는데 필요한 깊이정보 맵의 효율적인 부호화 방법을 제안한다. 가상시점 영상은 실사 영상의 깊이정보 맵을 이용한 시점보간(View Interpolation) 방법으로 생성된다. 일반적으로 깊이정보 맵의 부호화에는 H.264 등의 자연영상에 대한 동영상 부호화 방법을 그대로 적용하고 있는데, 이러한 부호화 방법은 깊이정보 맵의 특성을 고려하지 않은 방법이다. 따라서 본 논문에서는 깊이정보 맵의 영상특성을 고려하여, 맵 정보를 그레이 코드로 변환한 후 비트평면 단위로 부호화하는 방법과, H.264 부호화 방법을 블록단위로 적응적으로 선택하여 부호화하는 방법을 제안하였다. 실험결과로서 제안하는 방법의 성능은 H.264 부호화 방법에 비하여, BD-PSNR이 평균 0.5dB 향상되고, BD-rate는 평균 7.43% 감소되어 부호화효율이 우수함을 확인할 수 있었다. 또한 복원된 깊이정보 맵을 이용하여 생성된 가상시점 영상 간의 비교에서 제안하는 방법이 H.264 부호화 방법에 비해 주관적 화질이 크게 향상된 것을 확인할 수 있었다.

• 방송공학회논문지
• /
• 제14권6호
• /
• pp.807-810
• /
• 2009

본 논문은 실감 원격회의 시스템을 위한 실시간 영상기반 재조명 기술을 제안한다. 구체적으로 원격 사용자의 영상을 미리 캡처된 환경맵을 이용하여 재조명해서 사용자가 같은 공간에 있도록 느끼게 한다. 일반적으로 재조명 수행에 사용자 모델의 정교한 기하학적 모델정보를 도출하는 것이 고품질 재조명 영상을 도출하는데 큰 영향을 준다. 본 논문에서는 두 개의 방향성 조명을 사용하여 실시간으로 사용자 모델정보를 도출하는데 중점을 두었다. 도출된 모델정보와 환경맵의 조명정보를 이용하여 재조명 연산을 수행하고, 그래픽 하드웨어를 사용하여 고속으로 연산을 수행한다. 본 논문에서는 두 개의 방향성조명과 동기화된 카메라를 순차적으로 점등하여 사용자 표면의 반사율 맵을 도출한다. 그리고 빛이 반사할 때 표면에서 입사각과 반사각이 동일한 특징에 근거하여 반사맵 영상의 밝기가 밝을수록 사용자 표면의 법선벡터가 조명과 카메라간의 사잇각이 될 확률이 높아진다. 그래서 양방향의 반사율 값과 사잇각 두 개의 파라미터를 곱하여 표면의 법선벡터를 완성한다. 본 연구의 결과를 이용하면 영상기반 재조명 연구의 실제적이고도 폭넓은 적용이 가능할 것으로 사료되며 고화질의 콘텐츠 양산에도 기여할 것으로 사료된다.

• 대한공간정보학회지
• /
• 제17권3호
• /
• pp.49-56
• /
• 2009

최근 항공 비디오 영상을 이용한 고해상도 모자이크 영상제작에 대한 연구가 큰 관심사로 대두되고 있다. 그 중, 본 논문에서는 입체 모자이크 영상 제작에 그 목적을 두고 있다. 입체 모자이크 영상은 연속된 비디오 프레임 영상에서 각기 다른 촬영 각도를 가지고 있는 전방과 후방 슬라이스 영상을 추출한 후, 각각을 모자이킹하여 좌우모자이크 영상을 생성함으로써 제작되어진다. 입체 모자이크 영상을 제작하기 위해서는 프레임 영상간의 기하학적 관계를 규명할 수 있는 이동변수(motion parameters)가 결정되어져야 한다. 본 논문에서는 이러한 이동변수 중, 상대적인 이동변수를 규명할 수 있는 부등각 모델을 적용하였다. 이러한 상대적인 이동변수를 사용하여 모자이크 영상을 제작하는 방법을 자유 모자이크라고 한다. 자유 모자이크 과정은 결정된 이동변수를 이용하여 첫 번째 프레임 영상을 기준으로 영상등록을 수행한 후, 전방 및 후방 슬라이스 영상 추출, 접합선 추출, 영상 모자이킹 과정을 거쳐 수행된다. 본 연구의 결과로 좌우 모자이크 영상과 이를 이용한 여색입체 모자이크 영상을 나타내었으며, 정확도 분석을 위하여 종시차 분석을 수행하였다.