• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2013년도 추계학술대회
• /
• pp.635-636
• /
• 2013

본 연구에서는 이러한 다시점 디스플레이용 중간 영상을 만드는 데 쓰이는 DIBR 기법을 이용할 때, 깊이 정보를 다르게 양자화해서 좀 더 나은 화질의 중간 영상을 생성하는 방법에 대해서 설명한다. 특히 깊이 영상 정보를 모두 일정한 간격으로 나누어서 할당하는 균등 분할 방식과 특정 영역에 대해 더 많은 정보를 할당함으로써 그 영역에 대해서는 좀 더 질 높은 영상을 만들 수 있도록 하는 비균등 깊이 정보 양자화 방법에 대해서 설명한다.

• 방송공학회논문지
• /
• 제9권4호
• /
• pp.402-410
• /
• 2004

최근 HDTV 및 3차원 TV의 연구 개발에서 실감 방송에 대한 관심이 증가되고 있다. 실감 방송은 콘텐츠 생성, 제작, 압축, 전송 및 디스플레이까지 복합적이고 종합적인 시스템으로 구성된다. 이러한 분야에서는 방송을 통해 사용자에게 전송되는 실감 콘텐츠의 종류를 우선적으로 고려해야 한다. 콘텐츠에 따라 제작 단계에서 새로운 제작 기능을 필요로 하고, 콘텐츠 압축 기술의 연구의 필요성이 요구되며, 또한 전송 시스템의 설계 및 디스플레이 단말기들의 연구 개발이 필요하다. 본 논문에서는 향후 실감 방송에서 제공할 수 있는 실감 콘텐츠들을 소개하고 이에 따른 제작 방법을 제안한다. 제안하는 실감콘텐츠는 입체 다중뷰 영상, 객체기반 입체 영상, 깊이지도기반 합성 및 입체 영상과 그래픽 영상 합성으로 구성되며, 각 콘텐츠마다 제작 소프트웨어를 개발하였다. 또한, 실험 결과는 제작된 콘텐츠들이 사용자에게 입체감, 몰임감 및 현실감이 제공된다는 것을 보여준다.

• 전자공학회논문지SC
• /
• 제49권4호
• /
• pp.10-16
• /
• 2012

영상 기반 반도체 검사 장비의 검사 고속화와 검사 정확도를 위해, 넓은 FOV와 고해상도를 동시에 가지는 2차원 영상을 획득하는 것은 검사 장비에 필수적이다. 본 논문에서는 정밀도와 FOV 측면에서 양질의 영상 획득을 위한 새로운 영상획득 시스템을 제안하였다. 제안시스템은 하나의 렌즈와 광분할기, 두 개의 카메라 센서, 스테레오 영상획득 보드로 구성되며, 하나의 렌즈를 통해 입력되는 영상을 두 개의 카메라 센서를 통해 동시에 영상 획득한다. 획득된 영상의 정합을 위해, 첫 번째로 Zhang의 카메라 교정 방법을 적용시켜 각각의 카메라를 교정한다. 두 번째로 다른 카메라에서 획득한 두 영상들 사이의 수학적인 정합 함수를 찾기 위해 각 영상의 호모그래피(homography)를 이용하여, 양측 카메라간의 정합 행렬을 계산한다. 영상 호모그래피를 통해서, 획득된 두 영상은 하나의 최종 검사 영상으로의 통합을 위해 최종적으로 정합될 수 있다. 다중 카메라로부터 입력되는 다중 영상들을 활용하는 제안 검사 시스템은 실시간 영상 정합을 위해 매우 빠른 프로세스 유닛의 도움이 필요하다. 이를 위해 CUDA (Compute Unified Device Architecture)기반 병렬 프로세싱 하드웨어 및 소프트웨어를 활용한다. 두 개의 분할된 영상으로부터 실시간으로 정합된 영상을 얻을 수 있었으며, 마지막으로 연속된 실험을 통해 획득한 호모그래피의 정확도를 확인할 수 있다. 실험으로 얻은 결과들은 제안된 시스템과 방법이 대영역 고해상도 검사영상 획득을 위해 효과적임을 보인다.

• ETRI Journal
• /
• 제44권1호
• /
• pp.73-84
• /
• 2022

The moving picture experts group (MPEG) immersive video (MIV) technology has been actively developed and standardized to efficiently deliver immersive video to viewers in order for them to experience immersion and realism in various realistic and virtual environments. Such services are provided by MIV technology, which uses multiview videos as input. The pruning process, which is an important component of MIV technology, reduces interview redundancy in multiviews videos. The primary aim of the pruning process is to reduce the amount of data that available video codec must handle. In this study, two approaches are presented to improve the existing pruning algorithm. The first method determines the order in which images are pruned. The amount of overlapping region between the source views is then used to determine the pruning order. The second method considers global region-wise color similarity to minimize matching ambiguity when determining the pruning area. The proposed methods are evaluated under common test condition of MIV, and the results show that incorporating the proposed methods can improve both objective and subjective quality.

• 스마트미디어저널
• /
• 제3권4호
• /
• pp.22-27
• /
• 2014

3차원 복원은 실세계에 존재하는 물체를 가상의 공간에 재건하고 자유로운 시점을 선택하여 물체를 관찰할 수 있게 한다. 이러한 3차원 복원 기술은 교육, 문화, 예술 등 분야를 막론하고 다양한 곳에서 사용되고 있다. 3차원 복원 시스템을 구현하기 위해 본 논문에서는 Microsoft사에서 출시된 Kinect를 이용하여 다시점 시스템을 구성해서 고품질의 3차원 객체를 복원하는 방법을 제안한다. 먼저 3대의 Kinect를 객체의 전면에 수렴형으로 설치하여 색상 영상과 깊이 영상을 획득한다. 그런데 원본의 깊이 영상은 깊이 값을 가지지 않는 부분이 존재한다. 따라서 본 논문에서는 이 부분을 적절한 깊이 값으로 채워 넣기 위해서 깊이 가중치를 추가한 결합형 양방향 필터를 적용한다. 또한 다시점 시스템에서 얻은 원본의 색상 영상은 서로 색상이 일치하지 않는 문제가 존재하는데 이를 그대로 이용하여 3차원 모델 정합을 하면 색상이 부자연스럽게 연결된 3차원 모델을 얻게 된다. 따라서 이러한 색상 불일치의 문제를 해결하기 위해서 본 논문에서는 다시점 시스템에서의 3차원 기하학적 정보를 이용한 색상 보정 방법을 사용한다. 실험을 통해 제안한 방법을 이용하여 획득한 3차원 모델이 원본 3차원 모델보다 색상과 형태 관점에서 자연스럽게 표현된 것을 확인할 수 있었다.

• 한국측량학회지
• /
• 제28권3호
• /
• pp.369-375
• /
• 2010

다각사진은 3차원 공간정보의 시각화 뿐 아니라 측정 목적으로도 사용되므로 카메라 시스템에 대한 캘리브레이션이 요구된다. 다각사진 카메라 시스템을 구성하는 각 카메라는 홀더에 장착되어 상대적인 자세 및 위치가 고정된다. 따라서 투영중심점 위치와 자세각은 중앙에 장착된 연직사진에 대해서 적용하고 나머지 4 대의 경사사진용 카메라에 대한 투영중심점 위치 및 자세각은 연직사진에 대한 상대적인 값으로부터 계산될 수 있다. 이에 본 연구에서는 다각사진 카메라 시스템에 의해 실제 촬영된 다각사진을 이용하여 항공삼각측량을 실시 한 후 얻어진 다각사진의 외부표정요소로부터 연직사진을 기준으로 경사사진의 상대적 자세각과 투영중심점의 상대적 위치에 대해 조사 분석하였다. 연구결과 연직사진에 대한 경사사진의 투영중심점 위치는 표준편차가 크게 나타났으며 자세각에 대해서는 경사방향에 관계없이 연직사진을 고정하고 경사사진만 조정할 때 그 표준편차가 더 작게 나타났다. 또한 전체 외부표정요소를 구할 경우보다 자세각만 구할 경우 전반적으로 표준편차가 작으며 안정적인 것을 알 수 있었다.

• 한국정보통신학회논문지
• /
• 제20권2호
• /
• pp.375-384
• /
• 2016

본 논문에서는 스테레오 영상과 스테레오 영상 바깥 시점의 위성 영상 그리고 상응하는 깊이 영상이 입력으로 주어질 때 이 입력 영상들을 압축에 적합한 포맷으로 변환하고 활용하여 중간시점 영상을 합성하는 새로운 기법을 제안한다. 송출 단에서 깊이 영상들은 하나의 global 영상으로, 위성영상은 시점 이동 시에 발생하는 프레임 밖의 영역 및 가려짐 영역과 같은 홀 영역에만 해당하는 residual 영상으로 변환 후에 데이터 량을 줄이기 위하여 다운샘플링하고 주시점의 스테레오 영상과 더불어 HEVC 코덱으로 부호화 한 후 전송한다. 수신 단에서 복호화된 각 입력 영상들을 이용하여 스테레오 영상 간 그리고 스테레오 영상과 위성 영상간의 중간시점 영상을 합성한다. 실험을 통하여 제안한 포맷을 이용하여 합성한 중간 시점 영상을 MVD(Multiview Video plus Depth) 포맷을 이용하여 합성한 중간 시점 영상과 비교했을 때 전송하는 데이터의 비트율(bit-rate) 대비 객관적 그리고 주관적 화질이 뛰어남을 확인하였다.

• 정보처리학회논문지B
• /
• 제15B권1호
• /
• pp.9-16
• /
• 2008

본 논문에서는 스테레오 영상으로부터 중간 시점 영상을 생성하는 알고리즘을 제안한다. 사람이 3차원 영상을 자연스럽게 인지하기 위해서는 다시점의 영상이 필요하다. 이를 위해 많은 수의 카메라를 이용하면 시스템이 복잡하고 커지며 전송량도 문제가 된다. 따라서 송신측에서 스테레오 영상만을 촬영하여 송신하고, 수신측에서 여러 장의 중간 시점 영상을 생성하는 방법을 생각할 수 있다. 제안하는 방법은 스테레오 영상간의 시차에 따른 화소의 차로 표현되는 시차공간영상을 생성한다. 시차공간영상을 이용하여 최적의 시차 경로를 탐색하여 시차 지도를 만든다. 최종적으로 정합이 이루어지지 않은 가려짐 영역을 처리한 후에 중간 시점의 영상을 생성한다. 제안한 방법으로 생성한 영상은 30 dB PSNR 이상의 결과를 얻었다.

• 방송공학회논문지
• /
• 제24권6호
• /
• pp.919-927
• /
• 2019

본 논문에서는 입체 영상을 획득하기 위한 정밀 카메라 캘리브레이션(calibration) 기법을 제안한다. 일반적인 카메라 캘리브레이션 기법은 체커보드 구조의 목적 패턴을 이용하여 수행한다. 체커보드 패턴은 사전에 인지된 격자구조를 활용할 수 있으며, 체커보드 코너점을 통해 특징점 매칭을 용이하게 수행할 수 있음에 따라 2차원 영상 픽셀 지점과 3차원 공간상의 관계를 정확히 추정할 수 있다. 특징점 매칭을 통해 카메라 파라미터를 추정하므로 정밀한 카메라 캘리브레이션을 위해선 영상 평면내의 정확한 체커보드 코너 검출이 필요하다. 따라서 본 논문은 정확한 체커보드 코너 검출을 통해 정밀한 카메라 캘리브레이션을 수행하는 기법을 제안한다. 정확한 코너를 검출하기 위해 1-D 가우시안 필터링을 활용하여 코너 후보군들을 검출한 후 코너 정제(refinement) 과정을 통해 이상치(outlier)들을 제거하며 영상내의 부분 픽셀(sub-pixel) 단위의 정확한 코너를 검출한다. 제안한 기법을 검증하기 위해 카메라 내부 파라미터를 추정 결과를 판단하는 재투사 오차(reprojection error)를 확인하며, 카메라 위치 ground truth 값이 제공된 데이터 셋을 활용하여 카메라 외부 파라미터 추정 결과를 확인한다.

• 방송공학회논문지
• /
• 제25권3호
• /
• pp.439-448
• /
• 2020

본 논문에서는 다시점 RGB-D 카메라의 포인트 클라우드 정합을 위한 수정된 최적화 알고리즘을 제안한다. 일반적으로 컴퓨터 비전 분야에서는 카메라의 위치를 정밀하게 추정하는 것은 매우 중요하다. 기존의 연구에서 제안된 3D 모델 생성 방식들은 많은 카메라 대수나 고가의 3차원 Camera를 필요로 한다. 또한 2차원 이미지를 통해 카메라 외부 파라미터를 얻는 방식들은 큰 오차를 가지고 있다. 본 논문에서는 저가의 RGB-D 카메라를 8개 사용하여 전방위 자유시점을 제공할 수 있는 3차원 포인트 클라우드 및 매쉬 모델을 생성하기 위한 정합 기법을 제안하고자 한다. RGB영상과 함께 깊이지도 기반의 함수 최적화 방식을 이용하고, 초기 파라미터를 구하지 않으면서 고품질의 3차원 모델을 생성할 수 있는 좌표 변환 파라미터를 구하는 방식을 제안한다.