한국통신학회논문지 (The Journal of Korean Institute of Communications and Information Sciences)

  • 제28권4C호
  • /
  • Pages.424-432
  • /
  • 2003
  • /
  • 1226-4717(pISSN)
  • /
  • 2287-3880(eISSN)
한국통신학회 (The Korean Institute of Commucations and Information Sciences)
권호 표지

평활화된 적응적 변이추정 기법을 이용한 스테레오 영상의 효과적인 복원

Effective Reconstruction of Stereo Image through Regularized Adaptive Disparity Estimation Scheme

  • 김용옥 (광운대학교 전자공학과 국가지정 3차원 영상 미디어 연구실) ;
  • 배경훈 (광운대학교 전자공학과 국가지정 3차원 영상 미디어 연구실) ;
  • 김은수 (광운대학교 전자공학과 국가지정 3차원 영상 미디어 연구실)
  • 발행 : 2003.04.01
PDF 다운로드
⟨ 이전 논문 다음 논문 ⟩

초록

본 논문에서는 평활화 기법이 적용된 새로운 적응적 변이추정 알고리즘을 제시하고 이를 이용하여 스테레오 영상을 효과적으로 복원하는 방법을 제시하였다. 적응적 변이추정 방식은 기존 방식들에 비해 복원된 영상의 PSNR 이 크게 개선되는 것으로 분석되고 있지만 정합창의 크기가 입력 영상의 특징값에 따라 적응적으로 변하기 때문에 정합창이 겹쳐지거나 할당되지 않는 영역이 발생할 수 있다. 따라서, 본 논문에서는 기존의 적응력 변이추정 방식에 임계값을 설정하여 경계값을 보존하는 평활화 기법을 적용하여 보다 효율적인 스테레오 영상 복원기법을 제시하였다. 즉, 추정된 인접 변이벡터들 사이의 유사성을 이용하여 인접 변이 벡터들을 평활화해 줌으로써 기존의 적응적 정합창에서 발생했던 잘못된 변이벡터의 보정 뿐만 아니라 경계부분에서는 최적의 경계 보존값을 찾아 복원함으로써 보다 효율적인 예측영상의 복원이 가능하였다. CCETT의 'Man'과 'Claud' 영상을 사용한 실험 결과, 제안된 변이추정 기법에 의해 복원된 영상의 PSNR 기존의 화소기반에 비해 10.89dB, 6.13dB, 적응기반에 비해서는 1.41dB, 0.81dB 각각 개선됨이 분석되었다.

In this paper, an effective method of stereo image reconstruction through the regularized adaptive disparity estimation is proposed. Althougth the conventional adaptive disparity estimation method can sharply improve the PSNR of a reconstructed stereo image, but some problems of overlapping between the matching windows and disallocation of the matching windows can be occurred, because the matching window size changes adaptively in accordance with the magnitude of feature values. Accordingly, in thia paper, a new regularized adaptive disparity estimation technique is proposed. That is, by regularizing the estimated disparity vector with the neughboring disparity vectors, problems of the conventional adaptive disparity estimated scheme might be solved, and also the predicted stereo image can be more effectively reconstructed. From some experiments using the CCETT'S stereo image pairs of 'Man' and 'Claude', it is analyzed that the proposed disparity estimation scheme can improve PSNRs of the reconstructed images to 10.89dB, 6.13dB for 'Man' and 1.41dB, 0.81dB for 'Claude' by comparing with those of the conventional pixel-based and adaptive estimation method, respectively.

키워드

참고문헌

  1. Grinberg, V. 'Geometry of Binocular Imaging,' Proc. SPIE vol. 2177, PP. 56 -65, February 1994 https://doi.org/10.1117/12.173906
  2. 김은수/이승현 공역, '3차원 영상의 기초', 기다리, 1998
  3. Kyung-hoon Bae, Eun-soo Kim, 'Adaptively Compensated-Disparity Prediction scheme for Stereo Image Compression and Reconstruction', The Korean Institute of Communication Sciences, vol.27, no.7A, July 2002
  4. Mark S. Moellenhoff, Mark W. Maier, 'Characteristics of disparity-compensated stereo image pair residuals', Signat Processing: Image Communication, vol. 14, PP 55 -69, 1998 https://doi.org/10.1016/S0923-5965(98)00028-9
  5. Chun-Jen Tsai and A. K. Katsaggelos, 'Dense disparity estimation with a divide-and-con querdisparity space image technique', IEEE Trans. on Multimedia, vol.1, no.1, PP.18-29, 1999 https://doi.org/10.1109/6046.748168
  6. A. Redert, E. Hendnks and J. Biemond, 'Correspondence estimation in image pairs',IEEE Signal Processing Magazine, special is-sue on 3D and stereoscopic visual Communi-cation, vol. 16, no.3, PP.29-46, May 1999
  7. W. Ho and N. Ahuja, 'Surfaces from stereo: Integrating feature matching, disparity estima-tion, and contour detection,' IEEE Trans. on PAME, vol.ll, no.2, PP.121-136, 1989
  8. Kyoung-Hoon Bae, Eun-Soo Kim, 'A new disparity estimation scheme based-on adaptive matching window for intermediate view re-construction', Opt. Eng, vol. 42, no. 6, 2003
  9. Grimson, 'Computational experi-ments with a feature based stereo algorithm', IEEE Trans. on Pattern Anal. Machine Intell., vol.7, PP.17-34, 1985 https://doi.org/10.1109/TPAMI.1985.4767615
  10. Kyung-hoon Bae, Song-taek Lim, Eun-soo Kim, 'Adaptive Disparity Estimation and Intermediate View Reconstruction for Multiview 3D Imaging System', Proc. of SPIE, vol. 4660A, San Jose, California, January 2001
  11. Ebroul Izquierdo M, 'Stereo matching for enhanced telepresence in three-dimensional ideo communications', IEEE Transactions on circuits and systems for video technology, vol. 7, no. 4, PP. 629-643, August 1997 https://doi.org/10.1109/76.611174
  12. Cheng Hong Yang, 'Geometnc Models in Stereoscopic Video', Rapport technique de l'lNRS-T'el'ecommunications no. 95-12, 1995
  13. Z. Zhang, 'Determining the epipolar geome-try and its uncertainty: A review', Tech. Rep. Technical Report 2927, INRIA,Sophia-Antipolis, France, July 1996
  14. Z.-D. Lan and J. Konrad, 'Regularized block matching using control points,' Tech. Rep. 99-13, WRS-Telecommunications, July 1999
  15. See http://www.tnt.uni-hannover.de/js/Project/eu/distima/images/