Implementation of Multiview Calibration System for An Effective 3D Display

효과적인 3차원 디스플레이를 위한 다시점 영상왜곡 보정처리 시스템 구현

  • 배경훈 (광운대학교 전자공학과 차세대 3차원 디스플레이 연구센터(3DRC)) ;
  • 박재성 (광운대학교 전자공학과 차세대 3차원 디스플레이 연구센터(3DRC)) ;
  • 이동식 ((주)블루비스) ;
  • 김은수 (광운대학교 전자공학과 차세대 3차원 디스플레이 연구센터(3DRC))
  • Published : 2006.01.01

Abstract

In this paper, multiview calibration system for an effective 3D display is proposed. This system can be obtain 4-view image from multiview camera system. Also it can be rectify lens and camera distortion, error of bright and color, and it can be calibrate distortion of geometry. In this paper, we proposed the signal processing skill to calibrate the camera distortions which are able to take place from the acquisited multiview images. The discordance of the brightness and the colors are calibrated the color transform by extracting the feature point, correspondence point. And the difference of brightness is calibrated by using the differential map of brightness from each camera image. A spherical lens distortion is corrected by extracting the pattern of the multiview camera images. Finally the camera error and size among the multiview cameras is calibrated by removing the distortion. Accordingly, this proposed rectification & calibration system enable to effective 3D display and acquire natural multiview 3D image.

본 논문에서는 효과적인 3차원 영상 디스플레이를 위한 다시점 영상왜곡 보정처리 시스템 구현을 제안한다. 본 논문에서 제안한 보정처리 시스템은 기존의 스테레오 방식에서 확장된 4시점으로 카메라를 구성하여 영상을 획득하고 다시점 영상 간에 발생할 수 있는 렌즈의 왜곡, 카메라 오차 및 크기, 카메라 간 밝기 및 색상, 영상 간 밝기 균일도 등의 영상의 보정 신호처리에 대한 방법을 제시한다. 본 논문에서 제안된 시스템에서는 카메라 간 밝기 및 색상 보상은 각 영상의 특징점과 대응점을 찾아 영상 전체에 대한 대응점을 추출하여 색 변환을 통해 영상을 보정하였고 밝기 및 균일도 처리는 각 영상의 밝기차이 맵을 생성하여 보상하였다. 또한 렌즈의 구면수차로 인한 왜곡은 각 영상의 패턴을 검출한 후 렌즈 왜곡을 보정하고 카메라의 오차 및 크기 보상을 통해 다시점 3차원 디스플레이시 발생되는 왜곡현상을 해결하여 보다 효과적인 3차원 입체 디스플레이가 가능하도록 하였다.

Keywords

References

  1. Victor S. Grinberg, Gregg Podner, M. W. Siegel, 'Geometry of binocular imaging', Proc. of SPIE, vol. 2177, pp. 56-65, February 1994
  2. 김은수/이승현 공역, 3차원 영상의 기초, 技多利, 1998
  3. N. A. Dodgson, J. R. Moore and S. R. Lang, 'Multi-view autostereoscopic 3D display', IBC '99 10th-14th, pp. 497-502, September 1999
  4. 정보통신부, 3차원 입체영상(3DTV) 방송중계 시범서비스 보고서, pp. 2-7, 2002
  5. David Peter Capel, 'Image Mosaicing and Super-resolution', Robotics Research Group Department of Engineering Science University of Oxford, pp. 44-58, Trinity Term, 2001
  6. David peter Capel, 'Image Mosaicing and Super-resolution', 3rd Chapter-Geometric Registration Robotics Research Group Department of Engineering Science University of Oxford, Trinity Term 2001
  7. Jianbo Shi and Tomasi C. 'Good features to track', Proceedings of the 1994 IEEE Computer Society Conference pp. 593-600, June 1994
  8. Bruce D. Lucas and Tekeo Kanade, 'An Interactive Image Registration Technique with an Application to Stereo Vision', Computer Science Department, Carnegie-Mellon University, Pittsburgh, Pennsylvania 15213, proc. of imaging understanding workshop pp.121-130, 1981
  9. Jean Yves Bouguet, 'Pyarmidal Implementation of the Lucas Kanade Featur Tracker Description of the algorithm', Intel Coporation, Microprocessor Research Labs
  10. Guo-Qing Wei and Song De Ma, 'Implicit and explicit camera calibration: theory and experiments Pattern Analysis and Machine Intelligence', IEEE Transactions on, vol. 16, Issue: 5, pp. 469-480, May 1994
  11. Zhengyou Zhang, 'Flexible camera calibration by viewing a plane from unknown orientations.' , Computer Vision, 1999. The Proceedings of the Seventh IEEE International Conference on, Volume: 1, Sept. 1999, pp. 666-673, Sept. 1999