• Journal of Broadcast Engineering
• /
• v.19 no.4
• /
• pp.521-532
• /
• 2014

ATSC-M/H based hybrid 3DTV, which is one of the service compatible 3DTV system, has considerable quality gap between the left and right views. And CRA(Conditional Replenishment Algorithm) has been proposed to deal with the issue of resolution mismatch and improve the visual quality. In CRA, the disparity vectors of stereoscopic images are estimated. The disparity compensated left view and simply enlarged right view are compared and conditionally selected for generating the enhanced right view. In order to implement CRA, a fast algorithm is strongly required because the disparity vectors need to be obtained at every layer and the complexity of CRA is quite high. In this paper, we adopted SDSP(Small Diamond Search Pattern) instead of full search and predicted the initial position of search pattern by examining the spatio-temporal correlation of disparity vectors and also suggested the SKIP mode to limit the number of processing units. The computer simulation showed that the proposed fast algorithm could greatly reduce the processing time while minimizing the quality degradation of reconstructed right view.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2010.11a
• /
• pp.159-162
• /
• 2010

본 논문에서는 2D 영상에서 다시점 영상 생성 시 가상 시점을 만드는 과정에서 발생하는 가려짐 영역(occlusion) 보상 기법을 제안한다. 제안된 기법에서는 영상이 가지고 있는 주요한 특성을 유지하면서 가려짐 영역을 보상한다. 기존에 제안되었던 가려짐 영역 보상 방법은 가려짐 영역이 발생한 주변의 화소를 그대로 채워 넣는 방식을 사용하거나 평군값 필터 또는 중간값 필터와 같은 기존의 보상 필터를 이용하기 때문에 시차의 분포 특성을 고려하지 않는다. 따라서 오차는 줄일 수 있으나, 교정된 시차의 정확성은 보장되지 않는다. 본 논문에서 제안하는 가려짐 영역 보상 기법에서는 영상의 주요한 특성을 함께 고려하여 정확성을 높였다. 다양한 영상에 적용하여 제안된 기법의 성능을 테스트하였고, 그 결과 기존의 보상 방법에 비해 가려짐 영역을 비교적 정확하게 보상하는 것을 확인하였다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2010.11a
• /
• pp.262-265
• /
• 2010

본 논문에서는 그래픽 하드웨어와 그래픽 프로그램 기술을 이용하여 고속으로 스테레오 영상의 시차를 추정하는 기법을 제안한다. 우선, 컬러 스테레오 영상에 대하여 mean-shift 기법을 이용하여 컬러를 이용한 영역분할을 수행한다. 분할된 컬러 영역 단위로 가중치를 계산함으로써, 화소단위로 가중치를 계산하는 기존의 방식에 비하여 속도를 높일 수 있다. 블록정합함수를 계산하는 과정에서는 슬라이딩 윈도우 방식을 채택하여, 새로 블록안으로 들어오는 화소열과 빠져나가는 화소열의 정합함수값을 가감하여 화소마다 반복적으로 합산되는 정합함수의 계산량을 크게 줄인다. Middlebury 스테레오 영상을 이용하여 실험 및 평가를 수행한 결과, VGA 급 스테레오 영상을 기준으로 10 프레임 이상을 처리하면서도 기존의 적응적인 가중치를 갖는 블록정합 방식의 성능과 유사한 결과를 확인하였다. 이러한 고속화 방법을 통하여, 기존의 적응적인 가중치를 이용한 블록정합 방식에 비하여 훨씬 고속으로 스테레오 정합을 수행할 수 있으며, 실시간 시차추정이 필요한 시스템에 적용하는 것이 가능하다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.07a
• /
• pp.417-419
• /
• 2011

근래 다양한 형태의 멀티미디어 콘텐츠가 광범위하게 소비됨에 따라 단방향의 평면적 콘텐츠가 제공하는 시점의 한계에서 벗어나 사용자에게 보다 다양한 시점의 영상을 제공함으로써 사용자가 원하는 시점을 선택할 수 있는 실감형 콘텐츠에 대한 욕구가 증가하고 있다. 이러한 실감형 콘텐츠 중 하나인 파노라마 영상은 다수의 카메라를 통해 획득된 영상들을 하나의 영상으로 이어 붙여 넓은 시야의 영상을 제공함으로써 증대된 현장감과 몰입감을 제공하며 사용자 시점의 자유도를 증가시킬 수 있다. 본 고에서는 다수 영상의 스티칭 시 발생하는 고스팅 영향(ghosting effect)를 최소화 하기 위한 칼럼 시차 최소화 (Column Disparity Minimaization)기반의 멀티밴드 블랜딩(Multiband blending)을 소개 하고자 한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2012.11a
• /
• pp.40-41
• /
• 2012

양안식 3D 영상 시청 안정성에 대해 제기되고 있는 지속적인 이슈는 3D 영상 시장 활성화를 위해 반드시 선결 되어야 하는 과제이다. 최근, 이를 위해 양안식 3D 영상이 유발하는 시각적 불편함을 측정하고 이를 예측하는 연구가 활발히 진행되고 있다. 본 논문에서는 양안식 3D 영상에서 시각적 불편함을 야기하는 문제 영역의 양안 시차 변화에 따른 주관적 시각적 불편함을 측정한다. 이를 통하여 양안식 3D 영상에서 시각적 불편함을 주는 문제 영역의 영상 특성이 시청자가 인지하는 시각 피로에 지배적인 영향을 미칠 수 있음을 실험적으로 증명한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2012.07a
• /
• pp.91-94
• /
• 2012

본 논문에서는 3D 콘텐츠 제작에 있어 입체피로를 최소화하기 위한 영상의 수직시차 제거과정에 있어 사진측량기반의 강인기법을 제안하고자 한다. 영상의 수직시차 제거 과정은 크게 기하추정 단계와 에피폴라 변환 단계로 구성된다. 본 논문에서는 기하추정을 위해 사진측량에서 널리 활용되고 있는 공면조건 기반 상대표정 알고리즘을 적용한다. 이 때 상대표정 알고리즘에는 자동 정합점 추출에 따른 오정합과 위치오차에 강인성을 확보하기 위해 제약조건을 도입한 베이지안 접근방식을 적용하고자 하며, 이를 바탕으로 수행되는 에피폴라 변환에는 영상의 왜곡과 원 영상 대비 변형을 최소화하기 위해 공선조건기반의 중심투영변환기법을 적용하고자 한다. 알고리즘의 성능검증을 위한 비교 알고리즘으로, 기하추정에는 8점 알고리즘과 스테레오 캘리브레이션 기법이 사용되었으며 에피폴라 변환에는 Hartley 방법과 Bouguet 방법이 사용되었다. 실험결과는 제안알고리즘의 높은 정확도와 강인성, 그리고 활용적 가치를 보여주었다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2006.11a
• /
• pp.63-66
• /
• 2006

양안시차를 이용한 입체 디스플레이는 입체감과 편안함이 상충하는 특징이 있다. 본 논문에서는 이를 해결하기 위해 영상 특성에 따른 길이 조절을 통해 인지되는 입체감을 최대한 떨어뜨리지 않으면서 불편함을 최소화하는 방법을 연구하였다. 인간이 입체를 인지하는 기저는 상당히 복잡하며 영상의 여러 형태에 따라 동일한 깊이(양안시차, disparity)를 주는데도 입체감과 편안함이 다르게 인지된다. 따라서 영상 형태에 따라 다르게 인지되는 영향 인자를 선정하고 이에 대한 깊이감과 편안함의 관계를 실험을 통해 분석하여 적합한 값을 얻었다. 이를 표시되는 입체 디스플레이에 적용하여 들어오는 영상을 처리하여 영향 인자의 정도를 구하고 이에 따라 깊이가 조절(Depth Scaling)되도록 하여 편안한 입체 영상을 구현하였다.

• Journal of Broadcast Engineering
• /
• v.25 no.6
• /
• pp.882-897
• /
• 2020

Recently, the use of immersive media contents representing Panorama and 360° video is increasing. Since the viewing angle is limited to generate the content through a general camera, image stitching is mainly used to combine images taken with multiple cameras into one image having a wide field of view. However, if the parallax between the cameras is large, parallax distortion may occur in the stitched image, which disturbs the user's content immersion, thus an image stitching overcoming parallax distortion is required. The existing Seam Optimization based image stitching method to overcome parallax distortion uses energy function or object segment information to reflect the location information of objects, but the initial seam generation location, background information, performance of the object detector, and placement of objects may limit application. Therefore, in this paper, we propose an image stitching method that can overcome the limitations of the existing method by adding a weight value set differently according to the type of object to the energy value using object detection based on deep learning.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2000.11b
• /
• pp.127-130
• /
• 2000

스테레오 카메라로부터 획득된 좌/우 영상의 시차를 통해 사람들은 입체감을 느낄 수 있다. 일반적으로 스테레오 영상을 전송하기 위해서는 2 개의 전송 장비 및 채널이 필요하며, 이를 저장하기 위해서는 추가적인 저장 장치가 필요하다. 본 논문에서는 고선명 스테레오 영상을 한 채널 또는 한 프레임으로 다중화하는 스테레오 비디오 다중화기의 설계에 대해 설명한다. 스테레오 비디오 다중화기를 이용함으로써 기존의 저장 및 전송 장비를 이용하여 스테레오 영상을 저장, 전송할 수 있다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2007.02a
• /
• pp.60-63
• /
• 2007

최근, 핸드폰은 일상생활의 필수품이 되었다. 특히 카메라가 장착된 핸드폰은 개인홍보와 오락요소로의 대표적인 도구로 사용된다. 나아가 양안카메라가 적용된 핸드폰은 사용자에게 입체감을 전달할 것이며, 입체감은 보다 효과적인 개인홍보 및 오락성을 제공할 것이다. 핸드폰은 휴대가 용이하지만 제한된 표시소자의 크기 및 해상도로 인하여 입체시 구현 시 사용자에게 손실된 정보 및 낮은 임장감을 제공한다. 이에 본 연구는 기존의 입체시 구현에 대한 구속조건들을 분석하고 핵심 요인을 산출하여, 핸드폰 환경에서의 최적의 입체시 구현을 위한 새로운 구속조건의 범위를 정량화하였다. 대표적인 구속조건으로는 수평, 수직 시차량이 고려되었다. 본 연구의 결과는 핸드폰용 양안카메라의 제작공차 및 효과적인 시차영상 제작을 위한 기준을 제시한다. 연구에 사용된 제품으로는 QVGA해상도(320*240) 및 2.8' 크기의 표시소자인 PDA폰이며, 입체시에 대한 구속조건을 정량화하기 위하여 수직, 수평이동이 가능한 지그를 사용하여 실험의 정확성을 높였다. 피실험자는 10명이며 남자 7명, 여자 3명으로 구성되었다.