The new fusion interpolation for high resolution depth image

고품질 및 고해상도 깊이 영상 구현을 위한 새로운 결합 보간법

  • Kim, Jihyun (School of Electrical and Electrinic Engineering Yonsei University) ;
  • Choi, Jinwook (School of Electrical and Electrinic Engineering Yonsei University) ;
  • Ryu, Seungchul (School of Electrical and Electrinic Engineering Yonsei University) ;
  • Kim, Donghyun (School of Electrical and Electrinic Engineering Yonsei University) ;
  • Sohn, Kwanghoon (School of Electrical and Electrinic Engineering Yonsei University)
  • 김지현 (연세대학교 전기전자공학과) ;
  • 최진욱 (연세대학교 전기전자공학과) ;
  • 류승철 (연세대학교 전기전자공학과) ;
  • 김동현 (연세대학교 전기전자공학과) ;
  • 손광훈 (연세대학교 전기전자공학과)
  • Published : 2012.07.05

Abstract

3차원 영상 기술은 방송, 영화, 게임, 의료, 국방 등 다양한 기존 산업들과 융합하며 새로운 패러다임을 형성하고 있으며, 고품질 및 고해상도의 3차원 영상 획득에 대한 필요성이 강조되고 있다. 이에 따라, 최근에는 3차원 입체 영상을 제작 하는 방법 중 하나인 2D-plus-Depth 구조에 대한 연구가 활발히 진행되고 있다. 2D-plus-Depth 구조는 Charge-Coupled Device(CCD) 센서 등을 이용한 일반 카메라와 깊이 카메라를 결합한 형태로써 이 구조로부터 얻은 깊이 영상의 해상도를 상향 변환하기 위해서 Joint Bilateral Upsampling(JBU)[1], 컬러 영상의 정보를 활용한 보간법[2] 등의 방법들이 사용된다. 하지만 이 방법들은 깊이 영상을 높은 배율로 상향 변환할 경우 텍스처가 복사되거나 흐림 및 블록화 현상이 발생하는 문제점이 있다. 본 논문에서는 2D-plus-Depth 구조에서 얻은 고해상도 컬러 영상에서 보간 정보를 구하고 이 정보를 저해상도의 깊이 영상에 적용하여 상향 변환된 가이드 깊이 영상을 제작한다. 이 가이드 깊이 영상을 Bilateral Filtering[8]을 이용함으로써 고품질의 고해상도 깊이 영상을 획득한다. 실험 결과 제안하는 방법으로 해상도를 상향 변환을 할 경우에 기존의 보간법들에 비해 깊이 영상의 특성을 잘 보존함을 확인할 수 있고, 가이드 깊이 영상에 필터링을 처리한 결과가 JBU의 결과보다 향상됨을 확인할 수 있다.

Keywords