• 방송공학회논문지
• /
• 제20권3호
• /
• pp.368-378
• /
• 2015

2D영상의 3D변환 기술은 3D 디스플레이 및 3DTV에 기본적으로 장착된 기술로 꾸준히 연구 및 상업화가 진행된 기술이다. 이 기술은 3D 입체영상 콘텐츠 부족을 해결할 수 있다는 장점이 있다. 3D변환은 정지영상으로부터 다양한 깊이단서를 이용하여 깊이맵을 추출한 후에, DIBR(Depth Image Based Rendering)로 입체영상을 생성한다. 특정 영상이외에는 영상에서 신뢰성 있는 단서가 있는 경우는 많지 않다. 따라서 3D변환 기술은 일반 영상에서도 우수하고, 일관된 입체영상이 생성하는 것이 중요하다. 이러한 관점에서 본논문에서는 상기 조건을 만족할 수 있는 3D변환 방법을 제안한다. 주 기술로 최근 다양한 분야에서 활용되는 관심맵과 에지를 활용한 다. 깊이맵을 생성하기 위해서 기하적 투영, 근접 모델 및 바이노믹 필터를 활용한다. 실험에서는 제안한 방법을 24개의 2D 비디오 콘텐츠에 적용하였고, 입체감 및 시각적 피로도 등의 주관적 평가를 통해 3D 콘텐츠의 우수한 만족도를 확인하였다.

• 한국통신학회논문지
• /
• 제26권11A호
• /
• pp.1938-1945
• /
• 2001

본 논문에서는 입력된 2차원 정지영상에 차등적 이동기법을 적용한 스테레오스코픽 3차원 입체영상 변환 기법을 제안하였다. 즉. 입력된 2차원 영상에서 시차 및 폐색 정보를 이용하여 상대적인 거리 정보를 예측하고, 예측된 정보를 바탕으로 영상 객체들을 명암 레벨에 따라 분할한 다음, 분할된 각 영상은 수평 시차에 따라 차등적으로 영역을 이동시킴으로써 최적의 입체감을 갖는 스테레오 3 타원 입체 영상을 구현하였다. 그리고, 입력 영상과 재구성된 영상간의 PSNR 비교실험 결과 시차에서 약 1.6dB정도 향상됨을 확인하였고, 상용 스테레오 뷰어를 통한 실험결과에서는 4∼5 픽셀 범위의 영역이동으로 재구성된 스테레오 영상들에서 가장 높은 입체감을 보이는 것을 확 인하였다.

• 방송공학회논문지
• /
• 제18권3호
• /
• pp.362-371
• /
• 2013

본 논문에서는 스테레오 카메라 추적을 이용한 모바일 3차원 디스플레이 상의 실시간 증강현실 프레임웍에 대하여 기술한다. 모델 기반 추적 방법에 기초하여 카메라 포즈는 스테레오 카메라 간의 기하 관계를 만족하도록 동시 추정된다. 동시 추정된 카메라 포즈를 통해 가상 콘텐츠는 교정된 스테레오 영상에 올바르게 증강된다. 스테레오 카메라 추적과 스테레오 영상 교정은 서로 다른 쓰레드에서 수행하고, 영상 형식 변환 및 스테레오 영상 교정은 GPU로 고속으로 처리함으로써 실시간으로 수행된다. 제안된 프레임웍은 스테레오 카메라와 3차원 디스플레이가 장착된 스마트폰에서 구현되었다.

• 방송공학회논문지
• /
• 제10권2호
• /
• pp.139-148
• /
• 2005

This paper presents recent works of the development of MPEG-21 DIA utility software as one of MPEG-21 activities. The main purpose of this work is to make integrated utility software for DIA C/C++ modules in a Java framework. To do this, JNI plays a role of the interface of a main module with C/C++ DIA adaptation modules. Furthermore, DIA and DID parsers are integrated to the utility software. Our software is designed such that all DIA modules are easily integrated. A variety of adaptation modules have been adopted in MPEG-21 standard. Among them, stereoscopic video conversion that is one of DIA adaptation modules is chosen and we show that our utility software is correctly implemented based on experiments.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2011년도 추계학술발표대회
• /
• pp.471-473
• /
• 2011

3D 콘텐츠들은 과거 입체영화 '아바타' 이후로 꾸준히 증가하고 있다. 그리고 인터넷 등을 포함한 사이버 공간의 모든 환경이 제공자 위주에서 사용자 중으로 급격하게 변화하고 있는 상황이다. 이에 사용자들은 원하는 높은 현실감을 바탕으로 디지털 콘텐츠의 입체영상 서비스를 제공받기를 원한다. 그렇기에 3D 콘텐츠의 증가에 따른 Stereoscopic 기술의 필요성이 증대 되었다. 따라서 본 논문은 3차원 입체영상 기술의 기저 기술 중에 하나인 Anaglyph 영상을 연구하기로 하였다. 최종적으로 일반 영상 및 입체 사진을 이용한 스테레오 영상 변환 연구를 진행한다. 세부적으로는 입체 사진(Anaglyph)을 이용한 스테레오 영상 분할, 일반 영상을 이용한 스테레오 영상 편집 연구로 나누어 진행 하였다.

• 한국콘텐츠학회논문지
• /
• 제14권7호
• /
• pp.1-9
• /
• 2014

2D 영상 콘텐츠 시퀀스로부터 입체 3D 영상을 생성하는 기존의 2D-3D 변환(conversion) 방법은 제작파이프라인 상에서 많은 수작업이 요구된다. 본 논문에서는 기존 변환 방식의 문제점을 해결하기 위해 대상 장면의 공간을 재구성하는 효율적인 2D-3D 변환 방법을 제안한다. 제안된 방법은 영상 시퀀스를 입체적으로 분석하여 3차원 공간모델을 구성하고 텍스처 재사영 방법을 통해 스테레오 영상을 생성한다. 해석된 장면의 구조 정보를 이용하여 정확한 3D 입체 콘텐츠를 제작할 수 있음을 확인하였다. 제안된 시스템을 이용하여 스테레오그래퍼(stereographer)와 영상 제작자가 2D-3D 입체변환을 효율적으로 진행할 수 있다.

• 방송공학회논문지
• /
• 제13권4호
• /
• pp.427-439
• /
• 2008

본 논문에서는 일반 단일 시점의 축구 비디오를 스테레오스코픽 영상으로 변환하는 방법을 제안한다. 축구 비디오 분석 과정을 통하여 축구 비디오를 일정한 종류의 샷으로 분류하고, 분류된 샷 종류에 따른 깊이지도 생성 방법을 제안한다. 원거리 샷의 경우에는 운동장 영역 추출을 통하여 운동장 영역에 깊이기도 (Depth Map)을 생성하는 방법을 제안한다. 그리고 비 원거리 샷의 경우, 운동장 영역 블록 수와, 간단한 피부색 발견 알고리즘을 통해 생성한 스킨 블록의 수에 따라 다시 3가지로 샷을 분류하고, 각 종류의 샷에 따른 깊이지도 생성 방식 1) 오브젝트 영역 추출을 통한 깊이지도 생성, 2) 스킨 블록을 이용한 전경 영역 추출과 가우시안 함수를 이용한 깊이기도 생성, 그리고 3) 스킨블록이 없는 상황에서의 깊이기도 생성 방법을 제안한다. 제안한 방법을 통하여 생성한 깊이 지도를 이용하여, 스테레오스코픽 영상을 생성하는 방법을 소개하고, 생성한 실험영상을 결과로 제공한다. 그리고 주관적 깊이감 품질 평가를 통해서, 제안된 방법을 통해 생성된 영상이 원본 영상에 비해 깊이감이 향상됨을 증명한다.

• International Journal of Contents
• /
• 제10권3호
• /
• pp.9-16
• /
• 2014

Depth-image-based rendering is generally used in real-time 2D-to-3D conversion for 3DTV. However, inaccurate depth maps cause flickering issues between image frames in a video sequence, resulting in eye fatigue while viewing 3DTV. To resolve this flickering issue, we propose a new 2D-to-3D conversion scheme based on fast and robust depth-map generation from a 2D video sequence. The proposed depth-map generation algorithm divides an input video sequence into several cuts using a color histogram. The initial depth of each cut is assigned based on a hypothesized depth-gradient model. The initial depth map of the current frame is refined using color and motion information. Thereafter, the depth map of the next frame is updated using the difference image to reduce depth flickering. The experimental results confirm that the proposed scheme performs real-time 2D-to-3D conversions effectively and reduces human eye fatigue.

• 방송공학회논문지
• /
• 제19권5호
• /
• pp.616-626
• /
• 2014

본 논문에서는 FPGA와 GPU를 이용한 실시간 스테레오 다시점 변환 시스템을 소개한다. 해당 시스템은 이종의 연산장치를 이용하며 그에 따라 크게 두 부분으로 나뉜다. 첫 번째 부분은 변이 추출 부분으로서 실시간 계산을 위해 FPGA기반으로 구현되었다. 기본적으로 DP(Dynamic programming) 기반의 스테레오 정합 방법을 통해 초기 변이 영상이 계산되며, 후처리를 통해 개선된다. 개선된 변이 영상은 USB3.0과 PCI-express를 통해 GPU 장치로 전송된다. 스테레오 입력 영상이 GPU장치로도 전송되면, 변이 영상의 변이 값을 이용하여 중간 시점에서의 영상을 합성한다. 생성된 시점 영상들은 무안경 다시점 3차원 디스플레이의 특성에 맞게 하나의 영상으로 화소 또는 부분화소 단위로 재배치되는 시점 다중화 과정을 거쳐 최종적으로 4K 무안경 다시점 디스플레이에 실시간으로 재생된다. 스테레오 정합을 제외한 나머지 연산은 모두 GPU에서 병렬처리된다

• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2015년도 제51차 동계학술대회논문집 23권1호
• /
• pp.205-208
• /
• 2015

3D 입체영상을 제작하기 위해서는 2D 영상제작에 비해 오랜 제작 기간과 많은 비용이 발생한다. 비용 절감을 위해 기존의 2D 영상을 3D 입체영상으로 변환하는 연구가 진행되고 있다. 2D 영상을 3D 입체영상으로 변환하는 방식은 자동변환방법과 수동변환방법으로 구분할 수 있으며, 고품질의 2D-3D 변환 영상을 획득하기 위해서는 깊이정보 지도(Depth map chart)를 활용한 수동변환 방법을 많이 사용되고 있다. 하지만 2D-3D 수동변환에 사용되는 깊이정보 지도의 정량적 분석 데이터가 부족하여 사용자가 변환한 이미지에 대한 정확한 기준 깊이값 설정이 어려운 단점이 있다. 본 논문에서는 깊이정보 지도의 깊이값 정보에 대한 정량적 분석 데이터를 바탕으로 한 2D-3D 수동변환 변화범위를 제시함으로써 적정한 영상 변화를 유도할 수 있도록 한다.