DOI QR코드

DOI QR Code

Improvement of 3D Stereoscopic Perception Using Depth Map Transformation

깊이맵 변환을 이용한 3D 입체감 개선 방법

  • Jang, Seong-Eun (Kangwon National Univ., Dept. of Computer & Communications) ;
  • Jung, Da-Un (Kangwon National Univ., Dept. of Computer & Communications) ;
  • Seo, Joo-Ha (Kangwon National Univ., Dept. of Computer & Communications) ;
  • Kim, Man-Bae (Kangwon National Univ., Dept. of Computer & Communications)
  • 장성은 (강원대학교 IT대학 컴퓨터정보통신공학과) ;
  • 정다운 (강원대학교 IT대학 컴퓨터정보통신공학과) ;
  • 서주하 (강원대학교 IT대학 컴퓨터정보통신공학과) ;
  • 김만배 (강원대학교 IT대학 컴퓨터정보통신공학과)
  • Received : 2011.08.08
  • Accepted : 2011.09.20
  • Published : 2011.11.30

Abstract

It is well known that high-resolution 3D movie contents frequently do not deliver the identical 3D perception to low-resolution 3D images. For solving this problem, we propose a novel method that produces a new stereoscopic image based on depth map transformation using the spatial complexity of an image. After analyzing the depth map histogram, the depth map is decomposed into multiple depth planes that are transformed based upon the spatial complexity. The transformed depth planes are composited into a new depth map. Experimental results demonstrate that the lower the spatial complexity is, the higher the perceived video quality and depth perception are. As well, visual fatigue test showed that the stereoscopic images deliver less visual fatigue.

3D 영화 콘텐츠처럼 고해상도로 만들어진 입체영상은 저해상도 영상에서는 동일한 3D 깊이감을 느낄 수가 없다는 단점이 있다. 본 논문에서는 공간적 복잡도을 이용하여 깊이맵을 변환하여 입체감을 개선할 수 있는 방법을 제안한다. 제안 방법에서는 깊이맵의 히스토그램을 분석한 후에, 깊이맵을 다수의 깊이평면으로 분할한 다음에 깊이 평면을 변환한다. 마지막으로 변환된 깊이평면을 통합하여 최종 깊이맵을 생성한다. 주관적 평가 실험에서는 입체감 개선 및 이에 따라 발생하는 시각적 피로도를 검증하였다. 실험에서는 입체감의 개선이 증명되었으며, 영상 해상도가 낮아져도, 입체감은 유지되는 것을 보여주었다. 또한 얻어진 입체영상의 시각적 피로도 검증을 통해서 생성된 입체영상은 피로도가 증가하지 않는 것을 보여주었다.

Keywords

References

  1. G. Nur, S. Dogan, H. Arachchi, and A. Kondoz, "Impact of depth map spatial resolution on 3D video quality," IEEE 3DTV Conference, 2010.
  2. J. Choi, D. Kim, B. Ham, S. Choi, K. Sohn, "Visual fatigue evaluation and enhancement for 2D-plus-depth video," International Conference on Image Processing, pp. 2981-2984, 2010
  3. L. Zhang and W. J. Tam, "Stereoscopic image generation based on depth images for 3DTV," IEEE Trans. on Broadcasting, vol. 51, no. 2, pp. 191-199, June 2005. https://doi.org/10.1109/TBC.2005.846190
  4. C. Fehn, P. Kauff, M. Op de Beeck, F. Ernst, W. A. IJsselsteijn, M. Pollefeys, L. Van Gool, E. Ofek, and I. Sexton, "An evolutionary and optimized approach on 3D-TV," in Proc. of International Broadcast Conferenc, pp. 357-365, Sept. 2002.
  5. 김동현, 최성환, 손광훈, "시청자의 입체시 특성을 고려한 3D 비디오의 피로도 예측", 방송공학회 논문지 제 16권 제 2호, pp. 331-338, 2011년 3월. https://doi.org/10.5909/JEB.2011.16.2.331
  6. D. Kim, D. Min, J. Oh, S. Jeon and K. Sohn, "Depth image quality metric for three-dimensional video," Proc. SPIE-IS&T, Electronic Imaging, pp. 7237191_1-713729_ 2, 2009.
  7. I. Feldmann, O. Schreer, and P. Kauff, "Nonlinear depth scaling for immersive video applications," Proceedings of WIAMIS, Apr. 2003.
  8. A. Redert, "Visualization of arbitrary-shaped 3D scenes on depth-limited 3D displays," In Proceedings of 3DPVT, pp. 938-942, 2004.
  9. N. Otsu, "A threshold selection method from graylevel histograms," IEEE Trans. on Systems, Man, and Cybernetics, vol. 9, no. 1, pp. 62-66, 1979. https://doi.org/10.1109/TSMC.1979.4310076
  10. P. S. Liao, T. S. Chen, and P. C. Chung, "A fast algorithm for multilevel thresholding," Journal of Information Science and Engineering 17, pp. 713-727, 2001.
  11. 김수동, 유지상, "Depth layer partition을 이용한 2D동영상의 3D변환 기법," 방송공학회논문지, 16권 1호. pp. 44-53, 2011년 1월. https://doi.org/10.5909/JEB.2011.16.1.044
  12. http://research.microsoft.com/vision/InteractiveVisualMediaGroup/3DVideoDownload/, Microsoft Research
  13. ITU RDS, "Methodology for the subjective assessment of the quality of television pictures," ITU-R BT. 500-1, 2002.
  14. 서정동, 김동현, 손광훈, "스테레오 비디오의 객관적 화질평가 모델 연구, 방송공학회논문지, 제 14권 제 2호, pp. 197-209, 2009년 10월. https://doi.org/10.5909/JBE.2009.14.2.197
  15. 이형철, "주관적인 3차원 피로감 측정 방법에 대한 휴먼 팩터 연구", 방송공학회논문지, 제 15권 제 5호, pp. 607-616, 2010년 9월. https://doi.org/10.5909/JBE.2010.15.5.607