The KIPS Transactions:PartB (정보처리학회논문지B)

Korea Information Processing Society (한국정보처리학회)
권호 표지
DOI QR코드

DOI QR Code

Realistic 3D Scene Reconstruction from an Image Sequence

연속적인 이미지를 이용한 3차원 장면의 사실적인 복원

  • 전희성 (울산대학교 컴퓨터정보통신공학부)
  • Received : 2009.11.14
  • Accepted : 2010.03.19
  • Published : 2010.06.30
Download PDF
⟨ Previous Next ⟩

Abstract

A factorization-based 3D reconstruction system is realized to recover 3D scene from an image sequence. The image sequence is captured from uncalibrated perspective camera from several views. Many matched feature points over all images are obtained by feature tracking method. Then, these data are supplied to the 3D reconstruction module to obtain the projective reconstruction. Projective reconstruction is converted to Euclidean reconstruction by enforcing several metric constraints. After many triangular meshes are obtained, realistic reconstruction of 3D models are finished by texture mapping. The developed system is implemented in C++, and Qt library is used to implement the system user interface. OpenGL graphics library is used to realize the texture mapping routine and the model visualization program. Experimental results using synthetic and real image data are included to demonstrate the effectiveness of the developed system.

본 연구에서는 여러 이미지를 이용하여 사실적인 3차원 장면의 모델을 얻는 방법이 구현되었다. 이미지는 파라메터를 모르는 카메라를 이용하여 여러 위치에서 획득한 것을 사용하였다. 먼저 특징점 추출 및 추적 방법을 사용하여 모든 이미지에 대한 대응점들을 구하고 이 점들을 사용하여 사영복원을 구한다. 그 다음 사영 복원된 값에 여러 제약조건을 사용하여 유클리디언 복원을 하면 특징점들의 3차원 좌표값이 계산된다. 이 좌표값을 이용하여 삼각형 메쉬를 구한 후 이 면에 텍스처 맵핑을 하면 사실적인 복원이 완성된다. 전체 시스템은 C++언어로 구현하였으며, 사용자 인터페이스는 Qt 라이브러리로, 텍스처 맵핑과 모델 가시화 부분은 OpenGL 그래픽스 라이브러리로 구현하였다. 구현된 시스템의 효용성을 보이기 위해 모의 데이터와 실제 이미지 데이터를 이용하여 실험한 결과를 포함하였으며 만족할 만한 복원 결과를 얻을 수 있었다.

Keywords

References

  1. R. Hartley and A. Zisserman, Multiple View Geometry in Computer Vision, Cambridge University Press, 2000.
  2. M. Han and T. Kanade, "Creating 3D Models with Uncalibrated Cameras," Proc. of IEEE Computer Society Workshop on the Application of Computer Vision, Dec. 2000. https://doi.org/10.1109/WACV.2000.895420
  3. Q. Chen, "Multi-view Image-Based Rendering and Modeling," Ph. D. Dissertation, USC, 2000.
  4. Q. Chen and G. Medioni, "Efficient iterative solution to M-view projective reconstruction problem," Proc. IEEE CVPR 1999. https://doi.org/10.1109/CVPR.1999.784608
  5. MOVI house data (http://www.inrialpes.fr/movi/pub/Images/ sequences/g3_vp_ra_s1/index.html)
  6. W. H. Press, B. P. Flannery, S. A. Teukolsky, W. T. Vetterling, Numerical Recipes in C, Cambridge University Press, 1989.
  7. M. Woo, J. Neider, T. Davis, D. Shreiner, OpenGL Programming Guide, 3rd edition, Addison Wesley, 1999.
  8. Bruce D. Lucas and Takeo Kanade, "An Iterative Image Registration Technique with an Application to Stereo Vision," International Joint Conference on Artificial Intelligence, pp.674-679, 1981.
  9. Jianbo Shi and Carlo Tomasi, "Good Features to Track," IEEE Conference on Computer Vision and Pattern Recognition, pp.593-600, 1994. https://doi.org/10.1109/CVPR.1994.323794
  10. Qt Library (http://www.trolltech.com/)
  11. (http://www.ces.clemson.edu/~stb/klt/) KLT : An Implementation of the Kanade-Lucas-Tomasi Feature Tracker
  12. 김성용, 한준희, "제약 조건을 이용한 셀프 캘리브레이션 방법," 정보과학회논문지:소프트웨어 및 응용 제28권 제4호 pp. 358-368, 2001년 4월
  13. D. Lowe, "Distinctive image features from scale-invariant key-points," International Journal of Computer Vision, 60(2), 91-110, 2004. https://doi.org/10.1023/B:VISI.0000029664.99615.94