Journal of the Institute of Electronics Engineers of Korea SP (대한전자공학회논문지SP)

The Institute of Electronics and Information Engineers (대한전자공학회)
권호 표지

A 3D Modeling System Using Multiple Stereo Cameras

다중 스테레오 카메라를 이용한 3차원 모델링 시스템

  • Published : 2007.01.25
Download PDF
⟨ Previous Next ⟩

Abstract

In this paper, we propose a new 3D modeling and rendering system using multiple stereo cameras. When target objects are captured by cameras, each capturing PC segments the objects and estimates disparity fields, then they transmit the segmented masks, disparity fields, and color textures of objects to a 3D modeling server. The modeling server generates 3D models of the objects from the gathered masks and disparity fields. Finally, the server generates a video at the designated point of view with the 3D model and texture information from cameras.

본 논문에서는 임의 시점에서의 장면을 생성하기 위한 3차원 모델링 및 렌더링 시스템을 제안한다. 제안되는 시스템은 공간상에 설치된 복수의 스테레오 카메라와 PC들로 구성되며 UDP를 이용해 연결되어 각 카메라에서 획득되고 분석된 영상 데이터들을 모델링 PC로 전송해 실시간으로 3차원 모델을 생성하고, 이로부터 사용자가 원하는 위치에서의 장면을 생성해 디스플레이 하게 된다. 제안된 알고리듬은 성능 평가 결과 기존의 알고리듬보다 좋은 성능을 보였으며, 구현된 시스템은 실시간으로 사용자에게 원하는 시점에서의 영상을 자연스럽게 제공함을 실험을 통해 검증하였다.

Keywords

References

  1. R. Zhang, P. Tsai, J.E. Cryer and M. Shah, 'Shape from Shading: A Survey,' IEEE Trans. PAMI, vol.21, no.8, pp.690-706, 1999 https://doi.org/10.1109/34.784284
  2. Y. Aloimonos and M.J. Swain, 'Shape from Patterns: Regularization,' IJCV, vol.2, no.2, pp.171-187, 1988 https://doi.org/10.1007/BF00133699
  3. J. Garding, 'Direct Estimation of Shape from Texture,' IEEE Trans. PAMI, vol.15, no.11, pp.1202-1208, 1993 https://doi.org/10.1109/34.244682
  4. C. Buehler, W. Matusik, L. McMillan and S. Gortler, 'Creating and Rendering Image-based Visual Hulls,' Technical Report MIT-LCS-TR-780, MIT, 1999
  5. T. Matsuyama, X. Wu, T. Takai and T. Wada, 'Real-Time Dynamic 3-D Object Shape Reconstruction and High-Fidelity Texture Mapping for 3-D Video,' IEEE Trans. CSVT, vol.14, no.3, pp.357-369, 2004 https://doi.org/10.1109/TCSVT.2004.823396
  6. G.K.M. Cheung, S. Baker and T. Kanade, 'Visual Hull Alignment and Refinement Across Time: A 3D Reconstruction Algorithm Combining Shape-From-Silhouette with Stereo,' Proc. CVPR, vol.2, pp.375-382, 2003 https://doi.org/10.1109/CVPR.2003.1211493
  7. E. Trucco and A. Verri. Introductory Techniques for 3-D Computer Vision, NewJersey: Prentice Hall, 1998
  8. R. C. Gonzalez and R. E. Wood, Digital Image Processing, Addison-Wesley publishing company, 1993
  9. P. Kumar, K. Sengupta and S. Ranganath, 'Real Time Detection and Recognition of Human Profiles using Inexpensive Desktop Cameras,' Proc. ICPR, pp.1096-1099 2000 https://doi.org/10.1109/ICPR.2000.905663
  10. 김한성, 손광훈, '영역분할 기법과 경계보존 변이 평활화를 이용한 스테레오 영상의 변이 추정' 대한전자공학회 논문지 제1권 SP편 제6호 25-32쪽 2004년
  11. J. Weickert, 'A Review of Nonlinear Diffusion Filtering,' LNCS, vol.1252, pp.3 -28, 1997
  12. C. Everitt, 'Projective Texture Mapping,' NVIDIA SDK White Paper, 2001
  13. http://www.ptgrey.com/