Journal of the Korean Society of Surveying, Geodesy, Photogrammetry and Cartography (한국측량학회지)

Korean Society of Surveying, Geodesy, Photogrammetry and Cartography (한국측량학회)
권호 표지

A Study on Generation of Free Stereo Mosaic Image Using Video Sequences

비디오 프레임 영상을 이용한 자유 입체 모자이크 영상 제작에 관한 연구

  • Published : 2009.08.31
Download PDF
⟨ Previous Next ⟩

Abstract

For constructing 3D information using aerial photograph or video sequences, left and right stereo images having different viewing angle should be prepared in overlapping area. In video sequences, left and right stereo images would be generated by mosaicing left and right slice images extracted in consecutive video sequences. Therefore, this paper is focused on generating left and right stereo mosaic images that are able to construct 3D information and video sequences could be made for the best use. In the stereo mosaic generation, motion parameters between video sequences should be firstly determined. In this paper, to determine motion parameters, free mosaic method using geometric relationship, such as relative orientation parameters, between consecutive frame images without GPS/INS geo-data have applied. After determining the motion parameters, the mosaic image have generated by 4 step processes: image registration, image slicing, determining on stitching line, and 3D image mosaicking. As the result of experiment, generated stereo mosaic image and analyzed result of x, y-parallax have showed.

3차원 정보를 추출하기 위해서는 중복된 영역에 대하여 서로 다른 시야각을 가지고 있는 입체 영상이 존재하여야 하며, 비디오 프레임 영상에 있어서 입체 모자이크 영상은 연속적인 프레임 영상에서 좌우 슬라이스 영상을 추출하여 모자이킹 함으로써 제작할 수 있다. 따라서 본 논문에서는 항공기에 탑재한 비디오카메라로 촬영한 영상의 활용성을 극대화하기 위하여 3차원 정보 추출이 가능한 입체 모자이크 영상을 제작하는데 목적을 두고 있다. 모자이크 영상을 제작하기 위해서는 인접한 비디오 프레임 영상간의 위치관계를 규명하기 위한 이동변수가 결정되어져야 하므로, 본 연구에서는 자유 모자이크 방법으로 GPS/INS 데이터 없이 인접한 프레임 영상간의 상호표정요소를 이용한 방법을 사용하였다. 이동변수를 결정 한 후, 영상등록, 영상 슬라이싱, 접합선 추출 및 3D 모자이킹 과정을 거쳐 최종적인 입체 모자이크 영상을 제작하였다. 본 연구의 결과로써 제작된 자유 입체 모자이크 영상과 그 적용 가능성을 분석하기 위하여 종시차와 횡시차를 분석하여 나타내었다.

Keywords

References

  1. Huang, H. C. and Hung, Y. P. (1998), Panoramic stereo imaging system with automatic disparity warping and seaming, Graphical Models and Image processing, 60(3), pp. 196-208 https://doi.org/10.1006/gmip.1998.0467
  2. Ishiguro, H., Yamamoto, M. and Tsuji, S. (1990), Omni-direction Stereo for Making Global Map, Proc. IEEE ICCV'90,pp. 540-547
  3. Kumar, R., Anandan, p., Irani, M., Bergen, J. and Szeliski, R. and Kang, S. B. (1995), Direct Methods for Visual Scene Reconstruction, IEEE Workshop on Presentation of Visual
  4. Kumar, R., Sawhney, H., Asmuth, J., Pope, J. and Hsu, S. (1998), Registration of video to geo-referenced imagery, ICPR98, vol.2, pp. 1393-1400 https://doi.org/10.1109/ICPR.1998.711963
  5. Peleg, S. and Ben-Ezra, M. (1999), Stereo panorama with a single camera, Proc. IEEE CVPR99, pp. 395-401
  6. Shum, H. and Szeliski R. (1997), Panoramic Image Mosaics, Microsoft Research, Technical Report, MSR-TR-97-23
  7. Shum, H. and Szeliski, R. (1999), Stereo reconstruction from multiperspective panoramas, Proc. IEEE ICCV99, pp. 14-21
  8. Zhu, Z., Hanson, A. R., Schultz, H., Stolle, F. and Riseman, E. M. (1999), Stereo mosaics from a moving video camera for environmental monitorig, First International Workshop on Digital and Computational Video, Tampa, Florida, USA, pp. 45-54
  9. Zhu, Z., Riseman, E. M. and Hanson, A. R., (2001a), Parallel-perspective stereo mosaics, ICCV'01, Vancouver, Canada
  10. Zhu, Z., Hanson, A. R., Bassali, H. S., Schultz, H. J. and Riseman, E. M. (2001b), Generating seamless stereo mosaics from aerial video, ASPRS18th Biennial Workshop on Color Photography & Videography in Resource Assessment, ay 16-18, University of Massachusetts, Amherst