• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.07a
• /
• pp.337-338
• /
• 2011

본 논문에서는 안드로이드 운영체제 기반 스마트폰에서 Camera Preview를 이용하여 실시간으로 3D 입체영상을 생성하는 기법을 제안한다. 3D 입체영상은 2D 영상에 깊이감을 부여하여 시청시에 입체감을 느낄 수 있도록 변환한 영상이다. 그러나 모바일 단말기에서는 이러한 3D 입체영상을 생성하더라도 하드웨어의 제약으로 인해 사용자가 만족할만한 성능을 구현하는데 어려움이 있다. 먼저 안드로이드 운영체제에서 카메라를 사용하기 위한 구성 및 방법에 대해서 설명하고, 그에 따른 3D 입체변환 알고리즘을 제안한다. 제안 방법에서는 단말기의 성능에 맞는 우수한 결과를 생성하기 위한 에지 추출, 깊이맵 생성 방법을 분석하고, 획득한 깊이맵을 기반으로 하여 좌영상과 우영상을 생성한다. 최종적으로 획득한 두 영상을 병합하여 화면에 Display한다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2012.07a
• /
• pp.105-106
• /
• 2012

일반적으로 CG 합성이라 하면 '자연스러운' 것을 잘된 CG영상이라고 한다. 이 때 촬영된 영상이 정지화면 일 수 만은 없다. 카메라가 움직이는 영상에서는 CG합성도 실사카메라 무빙에 맞게 정확한 정합이 되어야 자연스러운 영상이 된다. 이를 위해 합성단계에서 작업할 때 3D 카메라 트래킹 기술이 필요하다. 카메라트래킹은 촬영된 실사영상만으로 카메라의 3차원 이동정보와 광학적 파라미터 등 촬영시의 3차원 공간을 복원하는 과정을 포함하고 있다. 이 과정에서 카메라 트래킹에 대한 오류의 발생으로 실사와 CG의 합성에 대한 생산성에 많은 문제점을 가지고 있다. 본 논문에서는 이러한 문제를 해결하기 위하여 소프트웨어에서 트래킹데이터를 보정하는 방법을 제안한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2012.11a
• /
• pp.207-210
• /
• 2012

본 논문에서는 스테레오스코픽 3D 동영상에서 왼쪽과 오른쪽 영상 사이의 프레임 동기가 맞지 않아 시청에 어려움을 주는 문제를 해결하기 위해서, 두 영상에서 물체의 움직임에 따른 차이를 이용한 프레임 동기화 방법을 제안한다. 제안 방식은 교정화 과정을 통해 수직 시차를 보정한 왼쪽과 오른쪽 입력 영상에서 각각 전 영상과의 차분 값에 대한 수평 방향 투영 프로파일을 구하고, 이들의 절대 오차에 대한 평균 (mean of absolute difference(MAD))를 계산해 최소값이 되는 프레임 조합을 찾아 프레임 동기를 맞추는 방법이다. 실험결과, 프레임 동기가 맞는 프레임 조합에서 최소 MAD 값을 기록하여 스테레오스코픽 3D 동영상에서의 프레임 동기화가 가능하다는 것을 볼 수 있으며, 특정 잡음이나 영상 압축 조건에 대해서도 동작함을 알 수 있다.

• Journal of Digital Contents Society
• /
• v.18 no.1
• /
• pp.123-132
• /
• 2017

The physical display technology is the ultimate display technology that human beings aspire, and the world makes use of laser, plasma and reflector plate. Besides, technology development of binocular stereoscopic display has been actively progressed, but there is a limitation to the intact physical representation such as influence of optical ambient light and brightness. In this paper, the display technology using physical deformation different from the existing optical display is approached as a cultural and emotional perspective. The purpose of this paper is to develop the multivariate display technology that can create 3D realistic stereoscopic images through projecting dynamic images on physically diversified screen by overcoming the limitations of 2D planar digital signage and study how to apply them to video, exhibition and performance.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 1996.06b
• /
• pp.35-40
• /
• 1996

In this paper, a method for 3-D surface reconstruction with two real cameras is presented. The method, which combines the extraction of binocular disparity and its interpolation can be applied to the synthesis of images from virtual viewpoints. The synthesized virtual images are as natural as the real images even when we observe the images as stereoscopic images. The method opens up many applications, such as synthesizing input images for multi-viewpoint 3-D displays, enhancing the depth impression in 2-D images and so on. We also have developed a video-rate stereo machine able to obtain binocular disparity in 1/30 sec with two cameras. We show the performance of the machine.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.07a
• /
• pp.376-377
• /
• 2011

본 논문에서는 스테레오스코픽 영상 및 깊이 프레임 오류 은닉 알고리즘을 제안한다. i) 좌측 컬러 프레임 오류 발생시 시간적 상관관계를 이용하여 프레임을 복원한다. iii) 우측 컬러 프레임 오류 발생시 깊이 정보 및 DIBR 기법을 이용하여 좌 우 시점간의 매칭 픽셀을 예측하고, 매칭된 픽셀의 움직임 벡터 및 밝기 차이를 이용하여 프레임을 복원한다. iii) 좌측 깊이 프레임과 iv) 우측 깊이 프레임의 오류 발생시 좌 우측 컬러 프레임의 움직임 벡터를 이용하여 손실된 프레임을 복원한다. 컴퓨터 모의 실험을 통해 제안하는 알고리즘의 스테레오스코픽 컬러 및 깊이 프레임 오류 복원 성능을 확인한다.

• Proceedings of the Korea Contents Association Conference
• /
• 2010.05a
• /
• pp.511-513
• /
• 2010

최근 국내에서 디지털 영상 매체 연구개발 분야 중 관심을 끌고 있는 분야가 바로 3D 입체영상 구현에 관한 분야이다. 특히 모바일 3D 영상 구현에 대한 연구는 시스템이 점차 디지털로 전환되면서 빠른 속도로 진보하고 있다. 하지만 그 개발방향은 현재 구현되는 영상매체와 기술에 대한 하드웨어적인 접근에만 집중되어 있다. 즉, 수용자의 태도와 인식과 같은 기술 외적인 부분에 대한 연구는 상대적으로 활발하게 이루어지지 못하고 있다. 이에 본 연구는 사용자 중심의 모바일 입체영상콘텐츠 개발의 소프트웨어적 특성과 입체영상에 대한 수용자의 태도를 분석함으로써 앞으로 미래의 모바일영상콘텐츠 개발방안에 대한 로드맵을 그려보고자 할 것이다.

• Journal of Broadcast Engineering
• /
• v.22 no.4
• /
• pp.429-437
• /
• 2017

2D-to-3D conversion technology has been studied over past decades and integrated to commercial 3D displays and 3DTVs. Generally, depth cues extracted from a static image is used for generating a depth map followed by DIBR (Depth Image Based Rendering) for producing a stereoscopic image. Further, motion is also an important cue for depth estimation and is estimated by block-based motion estimation, optical flow and so forth. This papers proposes a new method for motion depth generation using Motion History Image (MHI) and evaluates the feasiblity of the MHI utilization. In the experiments, the proposed method was performed on eight video clips with a variety of motion classes. From a qualitative test on motion depth maps as well as the comparison of the processing time, we validated the feasibility of the proposed method.

• Proceedings of the Korean Information Science Society Conference
• /
• 2006.06b
• /
• pp.361-363
• /
• 2006

객체 기반의 3차원 입체 변환 기법은 연속적으로 입력되는 2D 동영상에서 객체를 추출하여 입체 영상으로 변환하는 기법을 말한다. 두 눈에 투시되는 각 객체마다 서로 다른 시차를 가져야 입체감을 느낄 수 있다. 따라서 2D 영상에서 정확한 객체를 추출하는 것이 중요하다. 본 논문에서는 프레임간의 차이를 이용하여 대략의 움직이는 객체 영역을 얻고, 그래프 및 알고리즘을 사용하여 정확하고 안정적인 객체를 자동으로 추출한다. 스크린과 양안 사이의 거리를 고려하여 입체 영상을 만들어 낸다. 후처리 단계에서는 입체 영상을 만들어 내면서 생긴 빈 공간을 채운다. 실험에서는 2D 영상으로부터 입체 영상을 생성한 것을 보여 준다.

• Journal of Broadcast Engineering
• /
• v.16 no.2
• /
• pp.216-225
• /
• 2011

Following the proliferation of three-dimensional video contents and displays, many terrestrial broadcasting companies have been preparing for stereoscopic 3DTV service. In terrestrial stereoscopic broadcast, it is a difficult task to code and transmit two video sequences while sustaining as high quality as 2DTV broadcast due to the limited bandwidth defined by the existing digital TV standards such as ATSC. Thus, a terrestrial 3DTV broadcasting with a heterogeneous video codec system, where the left image and right images are based on MPEG-2 and H.264/AVC, respectively, is considered in order to achieve both high quality broadcasting service and compatibility for the existing 2DTV viewers. Without significant change in the current terrestrial broadcasting systems, we propose a joint rate control scheme for stereoscopic 3DTV service based on the heterogeneous dual codec systems. The proposed joint rate control scheme applies to the MPEG-2 encoder a quadratic rate-quantization model which is adopted in the H.264/AVC. Then the controller is designed for the sum of the left and right bitstreams to meet the bandwidth requirement of broadcasting standards while the sum of image distortions is minimized by adjusting quantization parameter obtained from the proposed optimization scheme. Besides, we consider a condition on maintaining quality difference between the left and right images around a desired level in the optimization in order to mitigate negative effects on human visual system. Experimental results demonstrate that the proposed bit rate control scheme outperforms the rate control method where each video coding standard uses its own bit rate control algorithm independently in terms of the increase in PSNR by 2.02%, the decrease in the average absolute quality difference by 77.6% and the reduction in the variance of the quality difference by 74.38%.