• 한국통신학회논문지
• /
• 제34권4B호
• /
• pp.349-359
• /
• 2009

본 논문에서는 3차원 효과의 최대화를 위한 스테레오 비디오 전송 방법을 제안한다. 기존의 다중스트림 동기화 기술은 단일 비디오와 오디오간의 지연을 최소화 하는 것으로, 둘 이상의 비디오가 동시에 필요한 3차원 비디오스트림 동기화에는 적합하지 않다. 본 논문에서는 인간에게 자연스럽고, 입체적으로 느껴지는 3차원 영상을 만들어 낼 수 있는 시간 차이의 허용 범위를 고려하여 다중 영상을 합성하는 기준을 제시하였고, 이를 위한 비디오 스트림 간의 동기화 방법을 제안하였다. 본 연구에서는 주관적 화질 평가를 통하여 스테레오 비디오를 3차원으로 느낄 수 있는 시간 차이의 허용범위를 측정하였다. 스테레오 비디오의 동기화를 위해, 전송된 각 비디오 스트림들의 취득 시간을 구하고, 시간 차이 허용 범위 안에 포함된 비디오 스트립을 이용하여 3차원 영상으로 합성한 뒤, 디스플레이 장치를 통해 재생한다. 제안한 기술의 성능을 평가하기 위해 실시간 다중 비디오 통신 시스템을 구현하였고, 주관적 화질 평가를 통해 제안한 동기화 제어 기술의 성능을 평가하였다. MOS (Mean Opinion Score) 측정 결과, 제안하는 기술을 통하여 3차원 디스플레이 장치에 재생한 영상은 DMOS (Differential Mean Opinion Score) 실험 스케일 중 매우 좋음과 좋음 범위에 속하는 것을 확인하였다.

• 방송공학회논문지
• /
• 제18권5호
• /
• pp.680-690
• /
• 2013

본 논문은 3D 입체 영상시스템의 좌-우 영상에 대한 실시간 동기 오차를 검출하고, 보정하는 방법을 제안한다. 스테레오스코픽 동영상의 경우 좌영상과 우영상의 동기가 편집과정의 실수나 영상전송 등의 다양한 이유로 시간적 동기가 맞지 않아 3D 입체 영상 품질이 떨어지는 문제점이 있다. 시간적 동기화의 목표는 두 비디오 시퀸스에서 동기오차를 검출하고, 검출된 동기오차만큼 보정하는 것이다. 이러한 동기오차의 문제점을 해결하기 위해 본 논문에서는 기존의 스페시오그램(spatiogram) 특징에 추가적인 컬러 분포의 변화 및 컬러 분포의 공간적인 변화 특징을 추가적으로 활용하여 좌-우 영상의 시간적 동기오차를 검출하고 보정하는 알고리즘을 제안한다. 먼저 동기오차를 검출하기 위해 좌-우 영상의 동기 프레임(pair frame)을 검출한다. 이 때, 단일 프레임만으로는 변화가 뚜렷하지 않으므로 일정한 시간의 블록 단위로 비교하는 방법을 새롭게 제안한다. 제안된 방법은 다양한 3D 콘텐츠 영상들의 실험을 통하여 그 효용성을 입증하였다.

• 방송공학회논문지
• /
• 제18권6호
• /
• pp.850-858
• /
• 2013

본 논문에서는 스테레오스코픽 3D 동영상에서 왼쪽과 오른쪽 영상 사이의 프레임 동기가 맞지 않아 시청에 어려움을 주는 문제를 해결하기 위해 두 영상에서 물체의 움직임에 따른 시간적 프레임 차분 영상을 이용한 동기화 방법을 제안한다. 먼저, 스테레오 조정(rectification) 과정을 통해 수직 시차를 보정한 왼쪽과 오른쪽 입력 동영상에서 시간적 프레임 차분 영상을 구하고, 두 차분 영상들에 대한 수평 방향 프로파일을 계산한다. 그 다음, 두 수평 프로파일의 절대 오차에 대한 평균 (mean of absolute difference(MAD))을 계산하여 그 값이 최소가 되는 프레임 조합을 찾아 스테레오스코픽 3D 동영상의 동기를 맞출 수 있도록 하였다. 실험결과, 두 영상의 프레임 동기가 맞는 프레임 조합에서 최소 MAD 값을 기록하여 제안 방법을 통해 스테레오스코픽 3D 동영상에서의 프레임 동기화가 가능하며, 제안 방법이 가우시안 잡음이나 H.264/AVC를 이용한 동영상 압축에 대해서도 강인함을 갖고 있음을 알 수 있다.

• 방송공학회논문지
• /
• 제19권6호
• /
• pp.896-906
• /
• 2014

본 논문에서는 3D 입체 영상시스템에서 신뢰도를 활용한 듀얼모드 실시간 동기에러 검출 및 보상방법을 제안한다. 3D 입체영상시스템의 동기오차 보상은 좌-우 영상시퀀스에서 동기오차를 검출하고, 검출된 동기오차만큼 보상하는 것이다. 3D 입체 영상시스템의 좌-우 동기 오차를 검출하는 알고리즘의 결과는 3D 입체 영상 콘텐츠에 따라서 그 동기에러 검출 결과의 정확도가 달라지는 문제점이 있다. 3D 입체 영상시스템의 동기 오차 검출을 위해 좌-우 영상의 페어 프레임 검출이 모든 3D 입체 콘텐츠의 영상에서 용이하지 않기 때문에 콘텐츠의 종류에 따라서 동기 에러 검출 알고리즘을 선별적으로 적용하는 방법이 필요하고, 동기 에러 검출의 결과를 신뢰할 수 있는 방법도 필요하다. 본 논문에서 활용하고자 하는 듀얼 모드 동기 에러 검출 알고리즘은 선행 연구[1]에서 새롭게 제안한 시간적 스패시오그램(temporal spatiogram) 방법과 기존의 텍스쳐 매칭(texture matching) 방법을 활용하였다. 동기에러 검출 결과에 대한 신뢰도를 측정하기 위해서 컨텐츠의 동적 특성(dynamics)과 구분성(distinction)을 새롭게 정의하였다. 제안된 듀얼 모드 동기 에러 검출 방법과 그 검출 결과에 대한 신뢰도 측정 방법은 다양한 3D 콘텐츠 영상들을 이용하여 실험하였고, 실제 3DTV 시스템에서의 동기 에러 검출 및 보상 실험 시스템에 실시간 구현하여 그 효용성을 입증하였다.

• 한국인터넷방송통신학회논문지
• /
• 제13권6호
• /
• pp.263-268
• /
• 2013

3D 영상을 만들기 위해서는 왼쪽과 오른쪽 두 대의 카메라로부터 입력되는 영상을 합쳐서 입체 영상을 만들어 내는 과정을 거치게 된다. 이 경우 두 대의 카메라로부터 입력되는 영상의 동기를 맞추는 것은 매우 중요하다. 본 논문서는 두 대의 카메라로부터 입력되는 영상의 동기를 맞추는 방법을 제시하였다. 또한 본 논문에서 제시한 알고리즘을 구현하기 위한 시스템을 소프트웨어를 이용하여 구현함으로써 다양한 영상 포맷을 쉽게 지원할 수 있도록 하였으며, 향후 여러 대의 카메라를 이용한 무안경 방식을 지원하는 시스템에도 적용할 수 있도록 하였다.

• 방송공학회논문지
• /
• 제17권4호
• /
• pp.596-610
• /
• 2012

본 논문은 모바일 방송망에서 고화질의 3D 방송 서비스를 제공하는 방법을 제안한다. 제안방법에서는 제한된 방송망의 대역폭을 극복하는 방법으로 오디오와 비디오를 방송망과 이동통신망으로 구성된 이종망을 통해 전달한다. 특히 서로 다른 망을 통해 각각 전송되는 스테레오스코픽 좌/우 영상을 동기화하는 방법을 제안한다. 본 논문에서의 동기화 방법은 RTP(Real Time Protocol)의 초기 타임스탬프(Timestamp)로부터의 옵셋을 이용하여 영상의 프레임(Frame) 순서를 구별하고 동일한 시점에 재생되어야 하는 좌/우 영상의 쌍을 찾는다. 마지막으로 3D 방송 서비스를 구별하고 타임스탬프를 얻기 위한 시그널링(Signaling)방법을 제시한다.

• 한국멀티미디어학회논문지
• /
• 제8권3호
• /
• pp.389-397
• /
• 2005

본 논문에서는 온라인 교육을 위해 사용되는 동영상 데이터와 VRML 컨텐츠간의 동기화 기술에 대해 연구한다. 미디어 동기화를 위한 HTML+TIME과 스크립트(Script), VRML 제 어를 위한 Java EAI 및 applet, VRML의 애니메이션을 조절할 수 있는 애니메이션 저작 템플릿을 만들어 온라인 교육시스템에 적용한다. 구현된 시스템의 애니메이션 제어성능 및 처리속도와 미디어간의 동기화 성능 평가를 수행하여 기존의 온라인 가상 교육 시스템의 동기화 성능보다 다소 향상된 결과를 얻었다 본 논문을 통해 HTML+TIME 미디어 동기화 기술과 VRML Web3D 가상현실 저작 기술 그리고 자바를 사용하여 시간에 따른 동영상 미디어의 제어와 3D 애니메이션의 제어에 관한 연구를 수행함으로써 교육 시스템의 구축이 간단하고 다양한 멀티미디어를 적용 할 수 있는 미디어 동기화 시스템을 제안한다.

• ETRI Journal
• /
• 제36권2호
• /
• pp.264-270
• /
• 2014

This paper introduces a novel repetitive delivery scheme for the left and right views in service-compatible (SC) 3D video that provides full backward compatibility to a legacy DTV system while retaining HD 3D visual quality without additional bandwidth or a codec over the legacy broadcasting channel. The proposed SC delivery scheme transmits individual view sequences of a 3D video in interlaced form, that is, a left-view sequence of a 3DTV program to be used repeatedly is transmitted first and stored locally, and the right-view sequence of the 3D program is then transmitted. This paper specifically describes the signaling, synchronization, and storage format methods used to validate the proposed SC delivery scheme. The experiment results show that the proposed SC delivery scheme can be effectively applied for an SC 3DTV service without degrading the DTV quality using only legacy DTV platforms.

• ETRI Journal
• /
• 제36권2호
• /
• pp.271-279
• /
• 2014

This paper proposes a new broadcasting system for the service-compatible 3DTV in which the 3D service can coexist with the conventional digital TV broadcast. In the proposed system, the commercial 3DTV service can be implemented via the existing DTV channel without utilizing the dedicated 3DTV system. This 2D/3D system interworks with the conventional system and can switch to 2D or 3D service according to the broadcast programming and schedule. The system also provides a mechanism that can prevent the synchronization mismatch between left and right video streams and between the stream and the associated signaling in the 2D/3D transition periods. The picture quality measurements are carried out based on the ITU-R recommended test to check the level of quality of service provided by the proposed scheme. The conformity tests are also performed with the conventional channel and the receiver for the DTV system to confirm the feasibility of the proposed one for the commercial service.

• 대한전자공학회논문지SD
• /
• 제46권2호
• /
• pp.31-37
• /
• 2009

본 논문은 위성방송 표준인 DVB-S2 (Digital Video Broadcasting-Satellite second generation) 에 적용 가능한 효율적인 변조모드 추정 가능한 프레임 동기 검출 회로를 제안한다. 매우 낮은 SNR에서 SOF (Start Of Frame)를 검출하고 변조 모드를 추정하기 위해 본 논문에서는 새로운 상관기 방식의 프레임 동기 검출 회로 구조와 낮은 복잡도의 AGC (Automatic Gain Controller)를 제안한다. 제안한 프레임 동기 검출 회로는 복잡도가 높은 기존의 D-GPDI (Differential - Generalized Post Detection Integration) 알고리즘을 직접 구현한 방식과 비교하여 약 93%의 곱셈기 개수와 89%의 덧셈기 개수를 줄일 수 있었으며 Xilinx Virtex II FPGA 검증 보드를 이용하여 제안된 구조를 검증하였다.