DOI QR코드

DOI QR Code

Developing an HDR Imaging Method for an Ultra-thin Light-Field Camera

초박형 라이트필드 카메라를 위한 HDR 이미징 알고리즘 개발

  • Received : 2023.06.03
  • Accepted : 2023.07.05
  • Published : 2023.07.25

Abstract

카메라 센서의 한계로 인하여 촬영 장면에 따라 한 번의 촬영으로 모든 영역의 밝기가 적절하게 촬영되지 않는 경우가 존재한다. 이러한 센서의 한계는 하이 다이나믹 레인지 이미징 기술을 통해서 극복이 가능하다. 한 장면을 다양한 노출 설정으로 여러 번 촬영하는 브라케팅은 움직이는 피사체를 찍기에 적절하지 않으며 촬영 시간이 길다는 단점이 있다. 본 연구는 한 번의 촬영으로 서로 다른 노출의 이미지를 얻을 수 있는 소형 라이트필드 카메라를 제안한다. 라이트필드 카메라는 대표적으로 두 가지 형태가 있는데, 첫 번째는 여러 대의 카메라를 어레이로 배치한 라이트필드 카메라 시스템이며, 두 번째는 대물렌즈 뒤에 마이크로 렌즈 어레이를 배치한 카메라이다. 본 연구에서 제작된 초박형 라이트필드 카메라는 센서 위에 마이크로 렌즈어레이가 부착되어있는 형태의 카메라로 각 렌즈 조리개 크기를 다르게 설계하여 한 번의 촬영으로 다른 노출의 촬영 결과를 얻을 수 있게 설계되었다. 촬영된 단일 영상들을 전처리 하여 이미지 품질을 높인 이후, HDR 알고리즘을 통해 각 단일 이미지들보다 다이나믹 레인지가 넓은 이미지를 획득하도록 구현하였다. 또한 노출 시간을 기준으로 설계된 식을 수정하여 조리개값에 따라 다른 가중치를 둘 수 있도록 바꾸었고, 이를 통해 단 한 번의 촬영을 통한 HDR 이미징을 구현하였다.

Keywords

Acknowledgement

이 논문은 2021년 정부(방위사업청)의 재원으로 국방기술진흥연구소의 지원을 받아 수행된 연구임(KRIT-CT-21-032)

References

  1. S. W. Hasinoff, D. Sharlet, R. Geiss, A. Adams, J. T. Barron, F. Kainz, J. Chen, and M. Levoy, "Burst photography for high dynamic range and low-light imaging on mobile cameras," ACM Trans. Graph., vol. 35, no. 6, nov 2016.
  2. S. J. Gortler, R. Grzeszczuk, R. Szeliski, and M. F. Cohen, "The lumigraph," in Proceedings of SIGGRAPH 1996. ACM, 1996, pp. 43-54.
  3. D. Kang, D. S. Jeon, H. Kim, H. Jang, and M. H. Kim, "View-dependent scene appearance synthesis using inverse rendering from light fields," in Proc. IEEE International Conference on Computational Photography (ICCP) 2021), May 2021.
  4. K. Venkataraman, D. Lelescu, J. Duparre, A. McMahon, ' G. Molina, P. Chatterjee, R. Mullis, and S. K. Nayar, "Pi-Cam: an ultra-thin high performance monolithic camera array," ACM Trans. Graph., vol. 32, no. 6, pp. 166:1-166:13, 2013. https://doi.org/10.1145/2508363.2508390
  5. M. H. Kim, "High-Fidelity Colour Reproduction for High-Dynamic-Range Imaging," Ph.D. Thesis, University College London, 2010. [Online]. Available: http://eprints.ucl.ac.uk/19325/
  6. E. Rublee, V. Rabaud, K. Konolige, and G. R. Bradski, "ORB: an efficient alternative to SIFT or SURF," in IEEE International Conference on Computer Vision, ICCV 2011, Barcelona, Spain, November 6-13, 2011. IEEE Computer Society, 2011, pp. 2564-2571.
  7. M. H. Kim, T. A. Harvey, D. S. Kittle, H. Rushmeier, J. Dorsey, R. O. Prum, and D. J. Brady, "3d imaging spectroscopy for measuring hyperspectral patterns on solid objects," ACM Transactions on Graphics (Proc. SIGGRAPH 2012), vol. 31, no. 4, pp. 38:1-11, 2012. [Online]. Available: http://dl.acm.org/citation.cfm?doid=2185520.2185534
  8. M. Levoy and P. Hanrahan, "Light field rendering," in Proceedings of the 23rd Annual Conference on Computer Graphics and Interactive Techniques, SIGGRAPH 1996, New Orleans, LA, USA, August 4-9, 1996. ACM, 1996, pp. 31-42.
  9. A. Meuleman, H. Jang, D. S. Jeon, and M. H. Kim, "Real-time sphere sweeping stereo from multiview fisheye images," in The IEEE Conference on Computer Vision and Pattern Recognition (CVPR), June 2021.
  10. P. E. Debevec and J. Malik, "Recovering high dynamic range radiance maps from photographs," in Proceedings of the 24th Annual Conference on Computer Graphics and Interactive Techniques, ser. SIGGRAPH '97. USA: ACM Press/Addison-Wesley Publishing Co., 1997, p. 369-378. [Online]. Available: https://doi.org/10.1145/258734.258884
  11. T. Mertens, J. Kautz, and F. V. Reeth, "Exposure fusion: A simple and practical alternative to high dynamic range photography," Comput. Graph. Forum, vol. 28, no. 1, pp. 161-171, 2009. https://doi.org/10.1111/j.1467-8659.2008.01171.x