DOI QR코드

DOI QR Code

Producing Stereoscopic Video Contents Using Transformation of Character Objects

캐릭터 객체의 변환을 이용하는 입체 동영상 콘텐츠 제작

  • Lee, Kwan-Wook (Kangwon National Univ., Dept. of Computer & Communications) ;
  • Won, Ji-Yeon (Kangwon National Univ., Dept. of Computer & Communications) ;
  • Choi, Chang-Yeol (Kangwon National Univ., Dept. of Computer & Communications) ;
  • Kim, Man-Bae (Kangwon National Univ., Dept. of Computer & Communications)
  • 이관욱 (강원대학교 컴퓨터정보통신공학과) ;
  • 원지연 (강원대학교 컴퓨터정보통신공학과) ;
  • 최창열 (강원대학교 컴퓨터정보통신공학과) ;
  • 김만배 (강원대학교 컴퓨터정보통신공학과)
  • Received : 2010.08.16
  • Accepted : 2011.01.03
  • Published : 2011.01.30

Abstract

Recently, 3D displays are supplied in the 3D markets so that the demand for 3D stereoscopic contents increases. In general, a simple method is to use a stereoscopic camera. As well, the production of 3D from 2D materials is regarded as an important technology. Such conversion works have gained much interest in the field of 3D converting. However, the stereoscopic image generation from a single 2D image is limited to simple 2D to 3D conversion so that the better realistic perception is difficult to deliver to the users. This paper presents a new stereoscopic content production method where foreground objects undergo alive action events. Further stereoscopic animation is viewed on 3D displays. Given a 2D image, the production is composed of background image generation, foreground object extraction, object/background depth maps and stereoscopic image generation The alive objects are made using the geometric transformation (e.g., translation, rotation, scaling, etc). The proposed method is performed on a Korean traditional painting, Danopungjung as well as Pixar's Up. The animated video showed that through the utilization of simple object transformations, more realistic perception can be delivered to the viewers.

3D 디스플레이의 급격한 공급으로 다양한 3D 입체 콘텐츠의 제작이 요구되고 있다. 3D 콘텐츠의 제작 방법으로는 일반적으로 스테레오 카메라로 입체물을 제작할 수 있지만, 기존 2D 콘텐츠에서 입체영상물을 제작하는 기법도 중요한 기술이다. 이러한 2D 콘텐츠의 변환작업을 통한 3D 영상물 제작은 3D 변환 분야에서 활발히 진행되고 있다. 그러나 단순히 한 장의 영상을 3D로 변환하는 것은 콘텐츠의 실감을 전달하지 못한다. 본 논문에서는 기존의 2D 영상에 존재하는 객체에 생명력을 불어넣어, 그림속이 객체가 살아나 움직이는 새로운 애니메이션 콘텐츠 제작 방법을 제안한다. 또한 3D 디스플레이에서 시청이 가능하도록 입체영상으로 제작된다. 입력영상이 주어지면 배경영상, 전경객체 마스크, 배경 깊이맵, 객체 깊이맵을 생성한다. 각 전경객체의 이동, 회전, 및 줌을 통해 생동감있는 객체를 구현하며, 변환된 객체의 깊이맵 및 배경영상을 이용하여 실감있는 입체영상을 제작한다. 실험영상은 신윤복의 단오풍정 및 픽사의 애니메이션 UP의 클립영상을 이용하여 3D 입체영상으로 구현하였다.

Keywords

References

  1. B. Mendiburu (이승현역), 3D입 체영화제작기술, 진샘미디어/영화진흥위원회, 2010년
  2. 김철현, 백준기, "비선형편집기반의입체영상제작흐름에관한연구", 한국방송공학회논문지, 제15권제3호, pp. 391-406, 2010년5월.
  3. 김상일, "3D방송콘텐츠 제작", 한국방송공학회지, 제 15권 제2호, pp. 7-13, 2010년6월.
  4. Takemura, Y.; Kimura, M.; Yamaguchi, S.; Hosokawa, J.; Arafune, Y., "Stereoscopic video movie camera using 300K pixel IT-CCD sensors," IEEE Transactions on Consumer Electronics, Vol. 37 Issue:1, pp. 39-44, Feb. 1991 https://doi.org/10.1109/30.73637
  5. W. Woo, N. Kim, and Y. Iwadate, "Stereo imaging using a camera with stereoscopic adapter," IEEE International Conference on Systems, Man, and Cybernetics, pp. 1512-1517, vol.2, 2000. https://doi.org/10.1109/ICSMC.2000.886069
  6. Wan, M., Zhang, N., Qu, H. Kaufman, A. E., "Interactive stereoscopic rendering of volumetric environments," IEEE Transactions on Visualization and Computer Graphics, Vol. 10 , Issue: 1, pp. 15-28, 2004 https://doi.org/10.1109/TVCG.2004.1260755
  7. M. Hou, "A model of real-virtual object interactions in stereoscopic augmented reality environments," Proceedings on Seventh International Conference on Information Visualization, IV, pp. 512-517, July 2003 https://doi.org/10.1109/IV.2003.1218033
  8. Donghyun Kim ; Dongbo Min ; Kwanghoon Sohn, "Stereoscopic Video Generation Method using Motion Analysis," IEEE 3DTV Conference, May 2007 https://doi.org/10.1109/3DTV.2007.4379422
  9. K. Moustakas, D. Tzovaras, M. Strintzis, "Stereoscopic video generation based on efficient layered structure and motion estimation from a monoscopic image sequence", IEEE Trans. On Circuits and Systems for Video Technology, Vol. 15, No. 8. Aug. 2005 https://doi.org/10.1109/TCSVT.2005.852401
  10. M. Kim, S. Park, Y. Cho, "Object-based stereoscopic conversion of MPEG-4 encoded data", PCM2004, LNCS 3333, pp. 491-498, Springer-Verlag, Berlin Heidelberg. 2004
  11. http://www.alive-gallery.com/
  12. 조철용, 김만배, "3DTIP: 한국고전화의3차원입체Tour-Into-Picture," 한국방송공학회논문지, 제14권제5호, pp. 616-624, 2009년9월.
  13. A. Criminisi, P. Perez and K. Toyama, "Region filling and object removal by exemplar-based image inpainting," IEEE Trans. Image Processing, Vol. 13, No. 9, pp. 1200-1212, 2004. https://doi.org/10.1109/TIP.2004.833105
  14. R. Seidel, "A simple and fast incremental randomized algorithm for computing trapezoidal decompositions and for triangulating polygons," Computational Geometry: Theory and Applications, Vol. 1, pp. 51-64, 1991. https://doi.org/10.1016/0925-7721(91)90012-4
  15. M. Sonka, V. Hlavac, and R. Boyle, Image Processing, Analysis and Machine Vision, 3rd Ed., Tomson, 2008.