DOI QR코드

DOI QR Code

Image Enhancement Algorithm using Dynamic Range Optimization

다이나믹 레인지 최적화를 통한 영상 화질 개선 알고리즘

  • Song, Ki Sun (Department of Electrical and Electronic Engineering, Yonsei University) ;
  • Kim, Min Sub (Department of Electrical and Electronic Engineering, Yonsei University) ;
  • Kang, Moon Gi (Department of Electrical and Electronic Engineering, Yonsei University)
  • 송기선 (연세대학교 전기전자공학과) ;
  • 김민섭 (연세대학교 전기전자공학과) ;
  • 강문기 (연세대학교 전기전자공학과)
  • Received : 2016.03.28
  • Accepted : 2016.05.31
  • Published : 2016.06.25

Abstract

The images captured by digital still cameras or mobile phones are not always satisfactory because the devices have limited dynamic ranges compared with that of the real world. To cope with the problems, tone mapping function based methods and retinex theory based methods are studied. However, these methods generate a halo artifact or limited enhancement of global and local contrasts. The proposed method estimates illumination information used for image enhancement by optimizing a dynamic range of input image. The estimated illumination information has smoothness characteristic where the luminance is flat and does not have where the luminance changes to prevent the halo artifact. Additionally, the estimated illumination information and surrounding pixel values are considered when the tone mapping function is applied to overcome the limitations of the conventional tone mapping function approach. Experimental results show that the proposed algorithm outperforms the conventional methods on objective and subjective criteria.

카메라 센서는 사람의 눈에 비해 제한적인 다이나믹 레인지를 갖기 때문에 영상 획득 시 실제 보이는 것과 다른 모습의 영상을 획득하게 된다. 이러한 문제를 영상 처리를 통해 해결하고자 톤 맵핑 함수를 이용한 방법들과 사람의 눈을 모델링한 레티넥스 이론 기반의 방법들이 연구되었다. 하지만 이러한 방법들은 후광 효과가 발생하거나 영상 개선 시 전역 또는 국부 콘트라스트 향상이 제한적이라는 단점이 있다. 제안하는 방법에서는 영상의 광원 정보를 레티넥스 이론을 활용하여 추정한 후 이를 영상의 품질 향상을 위해 다이나믹 레인지를 최적화시키는데 이용한다. 이 과정에서 후광 효과가 발생하는 것을 방지하기 위해 유사 밝기 영역에서만 평탄화가 이루어지고 밝기 차가 나는 영역은 밝기 차를 유지하도록 한다. 또한 톤 맵핑 함수 적용 시 하나의 화소가 아닌 주변 영역 정보와 추정된 광원 정보를 모두 고려하여 전역 및 국부 콘트라스트가 동시에 향상되는 알고리즘을 제안한다. 실험 결과들을 통해 제안하는 방법이 기존 방법에 비해 국부 콘트라스트 수치가 약 0.4 향상 되었고, 시각적인 면에서도 콘트라스트 향상과 함께 암부와 명부를 동시에 효과적으로 표현한 것을 확인 할 수 있다.

Keywords

References

  1. R. C. Gonzalez and R. E. Woods, Digital Image Processing (3rd Edition) (Prentice-Hall, Inc., Upper Saddle River, NJ, USA, 2006).
  2. N. Moroney, "Local color correction using non-linear masking," in Color Imaging Conference, 108-111.
  3. R. Schettini, A. Capra, A. Castorina, F. Gasparini, S. Corchs, and F. Marini, "Contrast image correction method," Journal of Electronic Imaging 19(2), 023005-023005-11 (2010). https://doi.org/10.1117/1.3386681
  4. Edwin H Land, "The Retinex Theory of Color Vision," Scientific American, 1977, 237, pp. 108-128.
  5. D. Jobson, Z.-u. Rahman, and G. Woodell, "Properties and performance of a center/surround retinex," Image Processing, IEEE Transactions on 6, 451-462 (1997). https://doi.org/10.1109/83.557356
  6. Z.-u. Rahman, D. Jobson, and G. Woodell, "Multi-scale retinex for color image enhancement," in Image Processing, 1996. Proceedings., International Conference on, 3, 1003-1006 (1996).
  7. D. Jobson, Z.-u. Rahman, and G.Woodell, "A multiscale retinex for bridging the gap between color images and the human observation of scenes," Image Processing, IEEE Transactions on 6, 965-976 (1997). https://doi.org/10.1109/83.597272
  8. R. Kimmel, M. Elad, D. Shaked, R. Keshet, and I. Sobel, "A variational framework for retinex," International Journal of Computer Vision 52, 7-23 (2003). https://doi.org/10.1023/A:1022314423998
  9. J. J. McCann, C. Parraman, and A. Rizzi, "Reflectance, illumination, and appearance in color constancy," Frontiers in Psychology 5 (2014).
  10. S. Pan, X. An, and H. He, "Adapting iterative retinex computation for high-dynamicrange tone mapping," Journal of Electronic Imaging 22(2), 023006-023006 (2013). https://doi.org/10.1117/1.JEI.22.2.023006
  11. Adobe Systems Inc., "Adobe photoshop cs6 version 13.0.1,".
  12. K. Panetta, C. Gao, and S. Agaian, "No reference color image contrast and quality measures," Consumer Electronics, IEEE Transactions on 59, 643-651 (2013). https://doi.org/10.1109/TCE.2013.6626251