• 방송공학회논문지
• /
• 제17권2호
• /
• pp.207-222
• /
• 2012

최근 3D 입체영상에 대한 소비자들의 관심 증대로 가전 업체들은 3D TV, 3D Monitor등의 제품들을 출시하고 있고, 이에 따라 3D 콘텐츠 시장도 급격히 성장할 것으로 예상된다. 그러나 이러한 3D 콘텐츠를 서비스함에 있어서 보다 높은 대역폭이 요구되어지므로 QoS(Quality of Service)를 보장하지 않는 IP 기반 전송환경에서의 고화질 3D 스트리밍 서비스는 소비자에게 끊김 없는 영상서비스를 제공하는데 제약이 있다. 이러한 문제를 해결하기 위해서, IP 망 네트워크 환경을 고려하여 사용자들이 원하는 콘텐츠를 네트워크 환경에 따라 적절한 품질로 제공 할 수 있는 적응적 스트리밍 서비스 기술이 현재 국제 표준화 기구인 MPEG(Moving Picture experts Group)에서 DASH(Dynamic Adaptive Streaming over HTTP)라는 이름으로 표준화가 진행 중에 있다. 그러나 DASH에서는 독립된 좌, 우 영상이 단일 segment안에 2개의 Elementary Stream(ES)으로 구성되어 있는 service- compatible 기반의 스테레오스코픽 콘텐츠에 대한 명확한 scheme이 나타나지 않는다. 따라서 본 논문에서는 DASH를 이용한 service-compatible 기반의 효율적인 적응적 3D 스트리밍 서비스 제공 방안을 제안한다. DASH를 이용한 3D 서비스는 사용자들에게 IP 망을 통한 다양한 품질의 3D 콘텐츠를 제공함으로써 끊김 없는 3D 스트리밍 서비스가 가능하고, 또한 하나의 3D 콘텐츠로 다양한 디바이스에 적용 가능하다는 이점이 있다.

• 한국위성정보통신학회논문지
• /
• 제8권2호
• /
• pp.68-73
• /
• 2013

최근의 3D 입체 영상 관련 기술의 발달은 스마트폰을 포함한 모바일 단말에서도 3D 입체 영상 서비스의 상용화를 가능하게 하고 있다. 스마트폰에서의 3D 입체 영상 서비스는 무안경 3D 디스플레이와 스테레오스코픽 3D 기술을 이용하고 있으며, 스테레오스코픽 이미지 관련 기술들은 지속적으로 활발히 연구가 진행되고 있다. 3D 입체 영상 서비스를 위하여 각각 다른 표준 H.264/AVC, H.264/AVC SEI, H.264/MVC가 MPEG에서 제정되었다. 본 논문에서는 최근 새롭게 대두되고 있는 모바일 단말에서의 스테레오스코픽 3D 기술의 발전과 특히 안드로이드 폰에서의 3D 서비스를 위한 비데오 포맷과 기능들에 초점에 맞추어 기술적 특성에 관한 분석을 행함으로서 그 활용성을 확인하였다.

• 방송공학회논문지
• /
• 제15권4호
• /
• pp.540-546
• /
• 2010

사용자에게 보다 실감나는 입체감을 제공하는 양안식 3차원 영상을 위해서는 기존 2차원 영상의 두 배에 해당하는 데이터가 필요하므로 이를 고속으로 처리하는데 어려움이 따른다. 본 논문에서는 2차원 영상과 깊이 영상을 입력 영상으로 한 고속 양안식 3차원 방송 시스템을 제안한다. 제안하는 시스템은 전송해야 할 데이터의 양을 줄이기 위해 전송 전에 H.264/AVC 오픈 소스 고속 부호화기인 x264를 이용하여 부호화를 수행한다. 수신단에서는 수신한 비트스트림을GPU(Graphics Processing Unit)에 내장된 CUDA 비디오 복호기 API를 이용해 설계된 복호기로 고속으로 복호하고, GPU를 이용해 고속으로 가상시점의 영상을 생성하여 양안식 3차원 영상을 재현한다. 제안한 시스템을 이용하면 수신단의 환경에 따라 2차원 디스플레이와 3차원 디스플레이에서 모두 영상을 출력할 수 있다. 컴퓨터 모의 실험을 통해 제안한 시스템이 3차원 양안식 콘텐츠를 초당 최대 24 프레임까지 서비스할 수 있음을 확인했다.

• ETRI Journal
• /
• 제34권5호
• /
• pp.666-673
• /
• 2012

Non-real-time delivery of stereoscopic video has been considered as a service scenario for 3DTV to overcome the limited bandwidth in the terrestrial digital television system. A hybrid codec combining MPEG-2 and H.264/AVC has been suggested for the compression of stereoscopic video for 3DTV. In this paper, we propose a stereoscopic video coding scheme using adaptive pre-/post-filters (APPF) to improve the quality of 3D video while retaining compatibility with legacy video coding standards. The APPF are applied adaptively to blocks of various sizes determined by the macroblock coding mode and reference frame index. Experiment results show that the proposed method achieves up to 24.86% bit rate savings relative to a hybrid codec of MPEG-2 and H.264/AVC including the inter-view prediction.

• 방송공학회논문지
• /
• 제7권3호
• /
• pp.219-228
• /
• 2002

본 논문에서는 2D 동영상을 스테레오스코픽(Stereoscopic) 동영상으로 변환하는 새로운 방법을 제안한다. 일반적으로 영상의 운동정보를 이용하여 스테레오스코픽 영상을 생성한다. 그러나 얻어진 운동 정보는 신뢰도가 낮을 수가 있고, 이것은 스테레오스코픽 영상 생성 단계에서 오류 발생의 원인이 된다. 상기 문제점의 해결 방안으로 운동 벡터 정보의 신뢰도가 높고 추정된 운동 유형이 정확한 키 프레임(Key Frame)을 활용하는 스테레오스코픽 변환 방법을 제안한다. 또한 각 운동 유형에 따른 스테레오스코픽 변환 방법을 소개한다. 제안한 스테레오스코픽 변환 방법의 성능 검증을 위해 다양한 실험 영상에 적용하고 키 프레임의 운동유형의 정확도를 측정하였다. 실험에서는 평균 90％이상의 키 프레임과 그 운동 유형을 정확히 찾는 성능을 얻었다.

• 한국콘텐츠학회논문지
• /
• 제10권2호
• /
• pp.138-145
• /
• 2010

입체영상 기술은 차세대 입체 멀티미디어 정보통신 분야에서 공통적으로 요구되는 핵심 기반기술이라 할 수 있다. 현실과 가까운 자연스러운 영상을 표현하고자 하는 입체영상의 구현은 인간이 끊임없이 노력해온 부분으로, 초기의 시각 인식체계에서 시작해 양안시차를 이용한 입체사진을 거쳐 동영상 입체시대로 이행 되었다. 생활이 변화하고, 새로운 문화가 형성되고, IT산업 확장 등 핵심 트렌드의 바탕에는 가상을 실제처럼 구현하는 기술의 발전이 있으며, 그 중심에는 3D 입체영상 기술이 있다. 본 논문에서는 3D 입체영상 기술개발 동향 및 개발전략을 살펴보고, 지속적인 시장 확대를 위한 3D 입체영상 기술의 효율적 활용방안을 제시하고자 한다.

• ETRI Journal
• /
• 제31권1호
• /
• pp.1-9
• /
• 2009

Frequency domain analysis is a fundamental procedure for understanding the characteristics of visual data. Several studies have been conducted with 2D videos, but analysis of stereoscopic 3D videos is rarely carried out. In this paper, we derive the Fourier transform of a simplified 3D video signal and analyze how a 3D video is influenced by disparity and motion in terms of temporal aliasing. It is already known that object motion affects temporal frequency characteristics of a time-varying image sequence. In our analysis, we show that a 3D video is influenced not only by motion but also by disparity. Based on this conclusion, we present a temporal anti-aliasing filter for a 3D video. Since the human process of depth perception mainly determines the quality of a reproduced 3D image, 2D image processing techniques are not directly applicable to 3D images. The analysis presented in this paper will be useful for reducing undesirable visual artifacts in 3D video as well as for assisting the development of relevant technologies.

• 방송공학회논문지
• /
• 제18권1호
• /
• pp.115-121
• /
• 2013

지상파 DMB 콘텐츠를 위한 국제 표준 파일 포맷인 DMB AF(Digital Multimedia Broadcasting Application Format) 표준을 확장하여 2D 비디오와 2D 대화형 서비스 데이터, 즉 MPEG-4 BIFS(Binary Format for Scene) 데이터뿐만 아니라 스테레오스코픽 비디오와 스테레오스코픽 BIFS 데이터를 함께 담아 2D/3D 비디오 및 2D/3D BIFS 프레젠테이션이 시간적으로 혼용될 수 있게 하는 방식이 최근 제안된 바 있다. 본 논문에서는 이렇게 확장된 DMB AF 형식의 파일로 주어진 3D 콘텐츠를 MPEG-DASH(Dynamic Adaptive Streaming over HTTP) 표준을 이용하여 스트리밍하는 서비스를 개발하고 이에 해당하는 클라이언트 소프트웨어를 구현하여 이 서비스를 검증하였다.

• 방송공학회논문지
• /
• 제14권1호
• /
• pp.85-88
• /
• 2009

DMB에서 MPEG-4 BIFS(Binary Format for Scenes) 기반 대화형 데이터 서비스를 스테레오스코픽(stereoscopic)하게 3D로 제공할 수 있는 "DMB 비디오 연동형 스테레오스코픽 데이터 서비스" 표준이 최근 TTA 단체 표준으로 제정되었다. 이는 바탕의 비디오 콘텐트 상에 오버레이되는 이미지 객체가 입체감을 갖고 돌출되게 함으로써, 시청자의 관심을 유도하여 서비스 활용도를 높일 수 있게 하기 위함이다. 본 논문에서는 이 표준의 배경과 제정 시 시행된 기술적 분석 및 심층적 고려 사항에 대해 설명하고, 표준 검증 결과 및 기존 지상파 DMB 수신기와의 상호운용성 시험 결과를 제시하였다.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제9권2호
• /
• pp.728-741
• /
• 2015

Stereo vision has become an important technical issue in the field of 3D imaging, machine vision, robotics, image analysis, and so on. The depth map extraction from stereo video is a key technology of stereoscopic 3D video requiring stereo correspondence algorithms. This is the matching process of the similarity measure for each disparity value, followed by an aggregation and optimization step. Since it requires a lot of computational power, there are significant speed-performance advantages when exploiting parallel processing available on processors. In this situation, multi-core CPU may allow many parallel programming technologies to be realized in users computing devices. This paper proposes parallel implementations for calculating disparity map using a shared memory programming and exploiting the streaming SIMD extension technology. By doing so, we can take advantage both of the hardware and software features of multi-core processor. For the performance evaluation, we implemented a parallel SAD algorithm with OpenMP and SSE2. Their processing speeds are compared with non parallel version on stereoscopic streaming video. The experimental results show that both technologies have a significant effect on the performance and achieve great improvements on processing speed.